Einzelnen Beitrag anzeigen
  #3  
Alt 18-01-2006, 15:31
jr-ewing jr-ewing is offline
Moderator
 
Registrierungsdatum: Nov 2005
Beiträge: 599
Standard

Wenn du keine robots.txt hasst ist es auch nicht schlimm

Aber msnbot hält sich an die Robots. Zumindest ist mir kein Fall einer Missachtung bekannt.

Wenn du da natürlich

User-agent: msnbot
Disallow: /

reinschreibst ist es wie eine Sperre.
Mit Zitat antworten