Google mozilla Bot aussperren

Beitrag von **Mario670** » 16.12.2005, 14:34

Hat jemand schonmal den Mozilla/5.0 compatible; Googlebot/2.1; ausgesperrt? Gab es danach irgendwelche Änderungen?

von **Anzeige von ABAKUS** »

Beitrag von **JR-EWING** » 16.12.2005, 15:49

Warum willst du den Bot aussperren ?

Beitrag von **Armi** » 16.12.2005, 17:01

Würde mich auch mal interessieren ob eine Ausperrung dieses Bots, das Crawlverhalten des normalen Bots geändert hat

Beitrag von **seobug** » 16.12.2005, 17:34

Ich würde es nicht riskieren.

Beitrag von **Mario670** » 17.12.2005, 02:13

Naja der Mozilla Bot macht ja scheinbar nix sinnvolles, kommt er oft und crawlt er tief gehts der Seite bald nicht mehr gut, zumindest ist das oft so.

Na dann werd ich das doch gleich mal testen

Beitrag von **Kristian** » 17.12.2005, 02:20

Hallo
Ich habe es anders erlebt.
Er kam frass und ging, ich dachte schon es sei für die Katz, aber eine Woche später war alles was er gefressen hatte im Index.
Wer den sperrt kann IMHO auch auch gleich eine ganz einfache und kurze robots.txt nehmen. (oder ein Seil)
Gruss Kristian

Beitrag von **/bin/false** » 17.12.2005, 02:35

Mario670 hat geschrieben:Naja der Mozilla Bot macht ja scheinbar nix sinnvolles, kommt er oft und crawlt er tief gehts der Seite bald nicht mehr gut, zumindest ist das oft so.

So ganz bin ich da nicht von überzeugt.
Auf einer Seite, die einen Relaunch mit neuen Dateinamen hat, kam zuerst
der 2.1 ... es waren nur die Seiten erster Eben mit Cache und allem
im Index ... bis der MozillaBot kam. Dann waren immer mehr Seiten mit
Cache und allem was dazu gehört.
Im Moment glaub ich, das der 21 die Seiten findet und der Mozilla den
Rank und die Umgebung checkt, Cache updated ...

Any thoughts?

Beitrag von **Mario670** » 17.12.2005, 02:46

Naja hab da so'n halbtotes Projekt, da kommt der Kollege täglich und ist recht fleißig, mal sehen was passiert wenn der nicht mehr darf ... we will see

Beitrag von **Kristian** » 17.12.2005, 03:10

Hallo
Naja zur Not gibt's ja noch Ebay
Das Seil
SCNR Kristian