Google Bot versteckt?

Beitrag von **cu-viper** » 08.09.2005, 10:19

Hi,

ich hab ne ganz komische These ohne zu wissen, wie das gehen soll.

Wie ihr vllt aus anderen Threads wisst wird meine Seite seit anfang September von den Bots scheinbar verstoßen.

Mir ist aber gerade in meinen Logs etwas aufgefallen. Meine Seitenzugriffe sind massiv höher als noch im August. Allerdings hab ich über die Tage nur meinen chCounter überwacht.

Jetzt hab ich bei google aktuelle Themen gesucht und siehe da - es scheint alles vorhanden.

Gibt es technisch die Möglcihkeit, dass google mit meinem Hoster zusammenarbeitet und eine Art deepcrawl direkt auf dem Server macht, sodass die ausgehende Verbindung davon garnix mitbekommt?

Mfg STephan

von **Anzeige von ABAKUS** »

Beitrag von **csx** » 08.09.2005, 10:25

Wozu sollte G das machen??

Beitrag von **set** » 08.09.2005, 10:25

Hi,

Meiner Logik nach, ist das ungewöhnlich, dass Google mit den "Hostern" zusammenarbeitet, weil es einfach zuviele Hoster gibt, Google kann doch nicht mit den allen Irgendwie auf ein Abbmachen kommen und fals es so wäre, wie du es sagst, dann wäre da sicher ein Gerücht aufgetreten. Ich selber denke: Google hat viele neuen Technologien, arbeiten öfters an neuen Systemen die wir noch garnicht kennen ( KEINER VON UNS)...

Besten Respekt
Set

Beitrag von **cu-viper** » 08.09.2005, 10:29

@csx - um traffic zu sparen. offensichtlich ist google in den vergangenen wochen echt an seine grenzen gestoßen. wenn die quasi "nur" eine indizierte liste vom hoster bekommen würden anstatt die ganze seite selbst spidern zu müssen würde das traffic und rechenleistung sparen - und zwar enorm!

dazu käme allerdings das problem, dass dynamische seiten (auch mod_rewrite) ein problem hätten, weil damit nur ein verzeichniscrawl möglich ist - ein kompletter crawl würde in meinen logs vermutlich auftauchen oder? (einzige option - crawlen eines raid-mirrors - wobei das dann nich in meinen traffic logs auftauchen würde.

<komisch das>

@set .. wenn die mit den 10 größten arbeiten würden würde das vermutlcih schon die hälfte der seiten gut abdecken ..
mfg cu

Beitrag von **set** » 08.09.2005, 10:36

Hi,

Aber das sind doch alles nur vermutungen!!! Was bringen uns solche vermutungen den weiter?? Fakten müssen her, aber ich denke FAKTEN werden wir nie kriegen, da Google macht was sie will!

Beitrag von **wbartl** » 08.09.2005, 10:54

Wir sind Hoster und Google ist noch nie mit solch einem Anliegen an uns herangetreten. Aber vielleicht sind wir zu klein.
Ich denke aber nicht, das es solch ein Abkommen zwischen Google und den Hostern gibt.

Beitrag von **axelm** » 08.09.2005, 11:11

Boah voll die krassen Theorien?! Nee Nee Jungs das läuft nicht.
Wenn du google helfen willst traffic zu sparen gib den ne Sitemap.xml sonst lass es.

oder setzt dich bei www.grub.org ein.