Hallo,

seit wann indexiert Google eigentlich Ftp-Server? Habe heute beim Durchsehen einiger Logs festgestellt, dass ein gültiger Googlebot sich auf einem Ftp-Server eingeloggt und auch Daten heruntergeladen hat.

Gruß Johannes

Wie solll er sich einloggen? Hast du da einen Dummyaccount ala test // test?

Also ich kann mir das nicht vorstellen, ich habe auch nichts offizielles von Googles Seite aus gehört.


Compiler

Nein, ganz normal "Anonymous FTP". Hier aktuelle Logs von heute:


Es ist definitiv ein Client mit einer IP von Google.

Gruß Johannes

Ist da vielleicht irgendwo ein Link ala <a href="ftp://...> drauf ?

Ja, solche Links bestehen. Ich find den Sprung von http zu ftp trotzdem erstaunlich und ist mir bislang so noch nicht aufgefallen.

Gruß Johannes

Wenn das mit dem FTP funktioniert und der Bot Textdateien durchsuchst, finde ich das ein ziemlich weiten Schritt und man kann damit viel machen. Ich werde mal testen, inwiefern er die Daten indexiert und als DC / Spam sieht.

Eventuell stell ich die Erkenntnisse hier online. Mal gucken wieviel Zeit ich dafür investieren kann.


Compiler

Je nach Lust und Laune läd er HTML-Dateien runter. Diese war nicht direkt verlinkt, hat der Googlebot also durch das Directory-Listing des Ftp-Server erkannt:


Ich werde jetzt mal eine Testdatei hochladen und sehen, ob sie ihren Weg in den Index findet.

Gruß Johannes