Hallo zusammen,

ich bin total am verzweifeln. In den Logs der Server ist zu sehen, dass der googlebot bestimmten Unterseiten schon vor zwei Wochen besucht hat. Bis heute ist in keinem Datacenter etwas zu finden.

Die Seiten tragen alle den Metatag
<META NAME="robots" CONTENT="INDEX , FOLLOW">

Sind auch in keiner robots.txt gesperrt. Beinhalten auch keine übermäßige Optimiering hinsichtlich Suchmaschinen-Spamming. Darüberhinaus sind auch keine HTML-Syntax Fehler enthalten und die MSN Suchmaschine hat auch alles sauber erfasst!

Weiterhin kommt jetzt der googlebot alle 2-3 Tage und besucht wahllos irgendwelche Seiten die sowieso schon im Index sind und das wars. Er verfolgt jetzt nicht mehr die Links auf die Unterseiten.

Wer weiß Rat? Wäre echt total nett, wenn mir jemand weiterhelfen würde!!

Gruß
Sascha