Thema: Robots.txt
Einzelnen Beitrag anzeigen
  #4  
Alt 28-11-2005, 23:52
jr-ewing jr-ewing is offline
Moderator
 
Registrierungsdatum: Nov 2005
Beiträge: 599
Standard

@mario
und wie setzt du das ein ?

Eine manuelle Logfile-Analyse ist ziemlich Zeitaufwendig und daher nicht sinnvoll.
mod_throttle hab ich noch garnicht gehört....

Und Spider-Fallen gefällt mir - da werd ich mal bei MSN suchen ;-)
Mit Zitat antworten