Brauche SuMa, die sich nicht an robots.txt hält

Beitrag von **Garfield** » 04.05.2006, 13:47

Hallo,

ich hab ne Spezialfrage

Und zwar brauche ich beruflich bedingt den Cache einer Homepage, möglichst von vor einigen Wochen (Ende März).

Das Problem ist :

User-Agent: *
Disallow: /

Deshalb bräuchte ich ne SuMa, die cached und sich nicht an die robots.txt hält.

Kann mir da jemand weiterhelfen ? Danke

von **Anzeige von ABAKUS** »

Beitrag von **DiveSurfer** » 04.05.2006, 15:54

der google spuckt doch da als sachen aus, hattest da denn kein glück ?

Beitrag von **Hasenhuf** » 04.05.2006, 18:15

DiveSurfer hat geschrieben:der google spuckt doch da als sachen aus, hattest da denn kein glück ?

Ich verstehe den Satz nicht.

Beitrag von **Garfield** » 05.05.2006, 07:37

@DiveSurfer:
Ne, ist leider nicht gecachet... es handelt sich obendrein noch um ne bei Google gekickte Domain.

Bei MSN ist sie zwar noch im Index, aber auch ohne Cache, da alles per robots.txt ausgesperrt, wie oben schon gesagt.

Blöd aber auch

Beitrag von **DiveSurfer** » 05.05.2006, 08:36

Hasenhuf hat geschrieben:
DiveSurfer hat geschrieben:der google spuckt doch da als sachen aus, hattest da denn kein glück ?
Ich verstehe den Satz nicht.

macht nichts der Garfield hat es verstanden

@Garfield https://web.archive.org e.v. ist das was dabei

Beitrag von **Garfield** » 05.05.2006, 10:49

Ne, da hatte ich auch schon gesucht.

Robots.txt Query Exclusion.

We're sorry, access to https://www.domain.de has been blocked by the site owner via robots.txt.

Beitrag von **Hasenhuf** » 05.05.2006, 13:31

DiveSurfer hat geschrieben:macht nichts der Garfield hat es verstanden

Ach eine Vermutung hatte ich schon nur...

Garfield hat geschrieben:...da alles per robots.txt ausgesperrt, wie oben schon gesagt.

Was also soll google anzeigen?