Seite 1 von 1
Wie kann ich einen spider simulieren?
Verfasst: 07.08.2005, 19:13
von Wally
Servus,
weiss jemand, wie ich einer Seite vortäuschen kann, dass mein Aufruf der Seite von einem Spider kommt?
Ich hab da ein script und das arbeitet leider mit Sessions, aber die Verkäufer haben eine Option eingebaut, damit Sumas eine statische html ohne sessID sehen.
Jetzt würde ich das gerne testen, indem ich meinem server vormache, dass ich ein googlebot wäre.
Wie kann ich das machen?
Danke
Wally
Wie kann ich einen spider simulieren?
Verfasst: 07.08.2005, 19:43
von bsnoop
Wie kann ich einen spider simulieren?
Verfasst: 07.08.2005, 19:52
von Wally
Merci bsnoop,
die kannte ich schon.
Suche aber nach einer Möglichkeit um zu sehen, ob der "simulierte" spider dann auch die sessID zu sehen bekommt.
Das hab ich mit den anderen nicht sehen können.
Gruss
wally
Verfasst: 07.08.2005, 20:13
von mic_jan
Ich würde es mal hiermit probiern:
https://www.wannabrowser.com/
Gruss
Michael
Wie kann ich einen spider simulieren?
Verfasst: 07.08.2005, 21:18
von Wally
Danke!
Als Ergebnis im http header bekomme ich dann dies:
Set-Cookie: PHPSESSID=6a8e5bf386c7155108e7e415b339f33b; path=/
Das heisst doch in diesem Fall, hab mich als googlebot ausgegeben, dass der auch die SessID sieht und nicht, so wie mir erzählz wurde eine statische Seite?
Oda?
Gruss
wally
Re: Wie kann ich einen spider simulieren?
Verfasst: 07.08.2005, 21:45
von Hasso
Wally hat geschrieben:Servus,
....aber die Verkäufer haben eine Option eingebaut, damit Sumas eine statische html ohne sessID sehen.
Wird hier der Suchmaschine andere Seiten angezeigt als dem Benutzer?Ich frage mich ob das die beste Lösung ist, das hört sich doch irgendwie nach Cloaking an oder habe ich es falsch verstanden?
Wally hat geschrieben:
Jetzt würde ich das gerne testen, indem ich meinem server vormache, dass ich ein googlebot wäre.
Wie kann ich das machen?
Kommt darauf an was die Verkäufer hier eingebaut haben, genau gesagt was hier geprüft wird: IP-Adresse des Clients oder deren Browser-Kennung, oder beide zusammen etc...?
Grüsse
Hasso
Wie kann ich einen spider simulieren?
Verfasst: 08.08.2005, 09:13
von Wally
Servus Hasso,
ne is kein cloaking. Die Inhalte sind die selben, nur die suma sollte ein html file sehen und keine sessid bekommen.
Werd da nochmals nachhaken.
gruss
wally
Re: Wie kann ich einen spider simulieren?
Verfasst: 08.08.2005, 10:19
von ironMIKE
Wally hat geschrieben:Danke!
Als Ergebnis im http header bekomme ich dann dies:
Set-Cookie: PHPSESSID=6a8e5bf386c7155108e7e415b339f33b; path=/
Das heisst doch in diesem Fall, hab mich als googlebot ausgegeben, dass der auch die SessID sieht und nicht, so wie mir erzählz wurde eine statische Seite?
Oda?
PHP versucht lediglich per Header eine Cookie-Session anzubieten (damit ein client diese abspeichert). Kein bekannter Crawler nimmt Cookies an, bzw. wertet diese aus. Wenn also keine Sessions in dem empfangenen HTML and die URIs angehängt sind, ist auch alles in Ordnung.
