Wie kann ich einen spider simulieren?

Beitrag von **Wally** » 07.08.2005, 19:13

Servus,

weiss jemand, wie ich einer Seite vortäuschen kann, dass mein Aufruf der Seite von einem Spider kommt?
Ich hab da ein script und das arbeitet leider mit Sessions, aber die Verkäufer haben eine Option eingebaut, damit Sumas eine statische html ohne sessID sehen.

Jetzt würde ich das gerne testen, indem ich meinem server vormache, dass ich ein googlebot wäre.

Wie kann ich das machen?

Danke
Wally

von **Anzeige von ABAKUS** »

Beitrag von **bsnoop** » 07.08.2005, 19:43

https://www.abakus-internet-marketing.d ... ieren.html

Beitrag von **Wally** » 07.08.2005, 19:52

Merci bsnoop,

die kannte ich schon.

Suche aber nach einer Möglichkeit um zu sehen, ob der "simulierte" spider dann auch die sessID zu sehen bekommt.

Das hab ich mit den anderen nicht sehen können.

Gruss
wally

Beitrag von **mic_jan** » 07.08.2005, 20:13

Ich würde es mal hiermit probiern:
https://www.wannabrowser.com/

Gruss

Michael

Beitrag von **Wally** » 07.08.2005, 21:18

Danke!

Als Ergebnis im http header bekomme ich dann dies:
Set-Cookie: PHPSESSID=6a8e5bf386c7155108e7e415b339f33b; path=/

Das heisst doch in diesem Fall, hab mich als googlebot ausgegeben, dass der auch die SessID sieht und nicht, so wie mir erzählz wurde eine statische Seite?

Oda?

Gruss
wally

Beitrag von **Hasso** » 07.08.2005, 21:45

Wally hat geschrieben:Servus,
....aber die Verkäufer haben eine Option eingebaut, damit Sumas eine statische html ohne sessID sehen.

Wird hier der Suchmaschine andere Seiten angezeigt als dem Benutzer?Ich frage mich ob das die beste Lösung ist, das hört sich doch irgendwie nach Cloaking an oder habe ich es falsch verstanden?

Wally hat geschrieben: Jetzt würde ich das gerne testen, indem ich meinem server vormache, dass ich ein googlebot wäre.
Wie kann ich das machen?

Kommt darauf an was die Verkäufer hier eingebaut haben, genau gesagt was hier geprüft wird: IP-Adresse des Clients oder deren Browser-Kennung, oder beide zusammen etc...?

Grüsse
Hasso

Beitrag von **Wally** » 08.08.2005, 09:13

Servus Hasso,

ne is kein cloaking. Die Inhalte sind die selben, nur die suma sollte ein html file sehen und keine sessid bekommen.
Werd da nochmals nachhaken.

gruss
wally

Beitrag von **ironMIKE** » 08.08.2005, 10:19

Wally hat geschrieben:Danke!

Als Ergebnis im http header bekomme ich dann dies:
Set-Cookie: PHPSESSID=6a8e5bf386c7155108e7e415b339f33b; path=/

Das heisst doch in diesem Fall, hab mich als googlebot ausgegeben, dass der auch die SessID sieht und nicht, so wie mir erzählz wurde eine statische Seite?

Oda?

PHP versucht lediglich per Header eine Cookie-Session anzubieten (damit ein client diese abspeichert). Kein bekannter Crawler nimmt Cookies an, bzw. wertet diese aus. Wenn also keine Sessions in dem empfangenen HTML and die URIs angehängt sind, ist auch alles in Ordnung.