Seite 1 von 2

Frage zum Googlebot

Verfasst: 01.12.2005, 16:08
von ralfmann
Hallo Leute,

kann mir jemand folgende Einträge in meinen Logs erklären:

69.64.49.243 - - [01/Dec/2005:15:45:26 +0100] "GET / HTTP/1.1" 200 46859 "-" "Googlebot/2.1 (+https://www.google.com/bot.html)" "www.meinedom.de"

Ich verstehe vor allem nicht, was er mit GET /HTTP/1.1 will bzw. macht!!

Vielen Dank schon mal für eure Antworten!!

Verfasst:
von

Frage zum Googlebot

Verfasst: 01.12.2005, 16:11
von Chris2005
gefakter Googlebot ... Google sendet ausserdem keine Referrer

https://whois.sc/69.64.49.243

Verfasst: 01.12.2005, 16:50
von ralfmann
Danke @ Chris2005

und wie erkenne ich den Googlebot denn?????

Habe bisher selten meine blanken Logfiles angesehen und weiss deshalb auch nicht was da drin stehen sollte/müßte um ihn zu identifizieren!!

Frage zum Googlebot

Verfasst: 01.12.2005, 16:54
von ralfmann
Noch eine Frage.

Wie kann man diese Fakes blockieren???

Irgendwie tummelt der sich schon den ganzen Tag bei mir rum!!

Frage zum Googlebot

Verfasst: 01.12.2005, 16:56
von Chris2005
Der Googlebot kommt in der Regel mit 66.249.xxx.xxx IPs. und sendet keine Referrer...

Frage zum Googlebot

Verfasst: 01.12.2005, 16:59
von Chris2005
Sperren kannst Du die in der .htaccess mit

Code: Alles auswählen

deny from 69.64.49.243
Damit wird diese IP Adress gesperrt... Guck mal hier im Forum nach .htaccess ... Da gibt es viel Literatur zu ...

Frage zum Googlebot

Verfasst: 01.12.2005, 17:18
von ralfmann
Danke dir!!

Werde gleich mal suchen!!

Verfasst: 02.12.2005, 10:12
von ralfmann
Hi nochmal,

habe auch folgenden Eintrag gerade noch mal gesehen bzw. sehe ich den öfter!!

66.249.66.230 - - [01/Dec/2005:20:16:27 +0100] "GET / HTTP/1.1" 200 46859 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +https://www.google.com/bot.html)" "www.meinedom.de"

was hat das GET / HTTP/1.1 zu bedeuten?????

Frage zum Googlebot

Verfasst: 02.12.2005, 10:18
von axelm
? euh
gib mir die Seite mit dem Protokoll http 1.1?

Frage zum Googlebot

Verfasst: 02.12.2005, 10:23
von ralfmann
Sorry, verstehe ich immer noch nicht :oops:

Kann oder muß ich da was beeinflussen ?????

Mir ist aufgefallen, das der Bot immer mit dieser Meldung reinkommt aber dann irgendwie nichts weiter passiert!! Ist das normal?? Muß ich noch irgendwas in den Header schreiben ???

Verfasst: 02.12.2005, 15:53
von Chris2005
ralfmann hat geschrieben:Hi nochmal,

habe auch folgenden Eintrag gerade noch mal gesehen bzw. sehe ich den öfter!!

66.249.66.230 - - [01/Dec/2005:20:16:27 +0100] "GET / HTTP/1.1" 200 46859 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +https://www.google.com/bot.html)" "www.meinedom.de"

was hat das GET / HTTP/1.1 zu bedeuten?????
Deiner ist ein "echter" Googlbot => https://whois.sc/66.249.66.230

Mach Dir ueber das http/1.1 keine Gedanken... Alles im gruenen Bereich...

Verfasst: 02.12.2005, 17:48
von ralfmann
Hi,

mich wundert halt nur, das der Bot tagelang schon meine Seiten spidert aber er einfach immer noch kein Cache zu sehen ist!!

Frage zum Googlebot

Verfasst: 02.12.2005, 19:19
von Chris2005
Der Mozillabot traegt nicht zum Index bei. Der hat andere Aufgaben. Nichts genaues weiss man nicht ... Housekeeping etc. Scheint wohl auch zur Blogsearch Engine zu gehoeren...

Verfasst: 03.12.2005, 13:41
von ralfmann
Dann habe ich doch gleich die nächste dumme Frage :oops: ??

Welcher Bot trägt denn dann zum Index bei ??????

Frage zum Googlebot

Verfasst: 03.12.2005, 13:48
von bull
@ralfmann
Ohne Dir jetzt nahe treten zu wollen, aber so gut wie alle Deine Fragen sind schon früher ausführlich behandelt worden, z.b. hier usw. (Suchfunktion).