Seite 1 von 1

Googlebot

Verfasst: 12.08.2003, 11:58
von daniel_k
Hi,

ich habe mit dem Mescalero einen Googlebot drin mit einer IP die ich noch garnicht kannte: 218.145.25.113

Weiss einer, was das für einer ist.

Verfasst:
von

Verfasst: 12.08.2003, 12:50
von UweT
das war kein googlebot, sondern nur ein user eines koreanischen dial-in providers der sich als googlebot ausgegeben hat.

Verfasst: 12.08.2003, 12:53
von daniel_k
ungeheuerlich, warum schaut der sich meine robots.txt an?
haben die in Korea keine eigenen :)

Verfasst: 27.08.2003, 22:24
von ~bWM
daniel_k hat geschrieben:ungeheuerlich, warum schaut der sich meine robots.txt an?
haben die in Korea keine eigenen :)
Weil es genug Idioten gibt die ihre geheimen Verzeichnisse in der robots.txt eintragen, (warum suchen wenn man eine Liste erhalten kann?) ;)

Verfasst: 28.08.2003, 14:20
von chrise
was sind denn geheime verzeichnisse? :-?

Verfasst: 28.08.2003, 16:54
von ~bWM
chrise hat geschrieben:was sind denn geheime verzeichnisse? :-?
/admin
/manage
/cgi-bin
/cgi-exe
/includes

und was weis ich wie sie die Dirs nennen.
Ist totaler Schwachsinn die in die robots.txt aufzunehmen, solange kein Link gesetzt ist wird der Bot auch nicht die Verzeichnisse aufrufen. NUr der Angreifer freut sich :)

Verfasst: 28.08.2003, 17:42
von Webby
/members
/p0rn
/pics of secretary
/hardc0revideos
/membership
/emaillist
/MeineSchafBilder
usw :-)