Hi,
ist es überhaubt sinnvoll, eine robots.txt-Datei für Verzeichnisse einzusetzen, auch wenn schon serverseitig ein Verzeichnislisting disabled wurde und auch kein Link von irgend einer Website der Domain auf das Verzeichnis verweisst?

Wenn ich mir mal eine beliebige robots.txt (z.B. von http://www.stern.de/robots.txt) ansehe, kann ich interessante Sachen festsellten: da gibt es ein '/config/'-Verzeichnis. U.U. sogar mit Code, was man ausspionieren könnte. Und wenn man mal so durchs Web surft (und sich ein bisschen auskennt), könnte man dann z.b. auf /typo3/-Verzeichnisse stoßen und mit ein wenig "Glück" das root-Passwort knacken. Was das heißt, kann sich jeder denken (und ausmalen)!

Also: stosse ich "böse Buben" mit einer robots.txt erst recht auf Seiten/Verzeichnisse, welche ohne diese Datei normal nicht gefunden werden ("was ich nicht weiß, macht mich nicht heiß")?

Wäre interessant, Eure Meinung zu hören

Gruß
owisworld