Badspider aussperren ... hilft ungemein.
Ich habe es jetzt durchgetestet, die Domains die für die meisten bots, die eh nix zu sagen haben, gesperrt sind, haben ihre Plätze gut gehalten. Weder ZE-Seiten noch nur Url-Listungen sind in dem Maße aufgetaucht.
Die anderen sind zum Teil gnadenlos gerutscht, egal mit welchem Begriff und glänzen mit dem Zusatz "zusätzliches Ergebnis" und tante goo meint diese Seiten kaum noch spidern zu müssen. Je mehr Links diese bekommen haben, umso mehr sind sie gerutscht. Bei den anderen das Gegenteil.
Ich werde für neue Seiten jetzt nur noch mit einer Positivliste arbeiten.
Diese Dieberei kostet echtes Geld und die Contentklauer sind oft von einem normalem Browser nicht mehr zu unterscheiden.
gruessle
nobrain |