Google Toolbar - Was wird da übertragen ?

Beitrag von **Southmedia** » 31.07.2003, 19:24

Folgendes habe ich gerade mal aus meinem Proxy hier herausgezogen:

GET /search?client=navclient-auto&googleip=O;216.239.41.104;772&ch=63379182174&freshness_check=45XO6lPtCj07_EBEmigE1&ie=UTF-8&oe=UTF-8&features=Rank&q=info&#58;http%3A%2F%2F216%2E239%2E37%2E104%2F HTTP/1.1

GET /search?client=navclient-auto&googleip=O;216.239.51.104;551&ch=61368751100&freshness_check=4V1-P0a0xSke_sFW_KDle&ie=UTF-8&oe=UTF-8&features=Rank&q=info&#58;http%3A%2F%2Fwww%2Eabakus%2Dinternet%2Dmarketing%2Ede%2Fforen%2F HTTP/1.1

GET /search?client=navclient-auto&googleip=O;216.239.51.104;351&ch=6292041847&ie=UTF-8&oe=UTF-8&features=Rank&q=info&#58;http%3A%2F%2Fwww%2Eabakus%2Dinternet%2Dmarketing%2Ede%2Fforen%2Fviewforum%2Ff%2D29%2Ehtml HTTP/1.1

Mal die Variabeln aufgeschlüsselt:

client=navclient-auto
googleip=O;216.239.51.104;551
ch=61368751100
freshness_check=4V1-P0a0xSke_sFW_KDle
ie=UTF-8
oe=UTF-8
features=Rank
q=info:http%3A%2F%2Fwww%2Eabakus%2Dinternet%2Dmarketing%2Ede%2Fforen%2F

Also was der macht ist mir klar, er holt den Pagerank ab, so sah eine Antwort aus (letzte Zahl ist der PR):

Code: Alles auswählen

HTTP/1.1 200 OK
Date&#58; Thu, 31 Jul 2003 18&#58;20&#58;42 GMT
Set-Cookie&#58; PREF=ID=756409b526f6d0ad&#58;TM=1059675642&#58;LM=1059675642&#58;S=2vkItybwXmk_ls7B; expires=Sun, 17-Jan-2038 19&#58;14&#58;07 GMT; path=/; domain=.google.com
Cache-control&#58; private
Content-Type&#58; text/html
Transfer-Encoding&#58; chunked
Server&#58; GWS/2.1



Rank_1&#58;1&#58;2

Das ganze funktioniert nur wenn man den richtigen Useragent und diese Checksum (ch) hat. Hat jemand ne Ahnung wie diese Checksum berechnet wird?

Was mich aber wirklich interessiert, was ist dieses "freshness_check" ? Denn da kann ich mir absolut keinen Reim drauf machen.

von **Anzeige von ABAKUS** »

Beitrag von **viggen** » 31.07.2003, 19:52

Ich glaube derjenige der die checksumme weiss, kennt das Geheinmiss des Pagranks, und das wäre Google! :/

freshness ist vielleicht wann die Seite zuletzt von Google upgedated wurde?

Beitrag von **Herbert** » 31.07.2003, 23:00

Schau mal hier: https://googledance.seochat.com/HTML-toolbar.html

---zitat
"freshness_check -- It obviously has something to do with that "Fresh Tag". This is parameter seems to change and is not URL based like the "ch" parameter"
---zitat ende

oder auch hier:
---zitat:
"The freshness_check was a checksum like parameter that was calculated from the Internet Explorer cache of the current page and sent to Google along with the PR request.
My only guess is that it was designed to help Google spot pages that had changed contents since it was last indexed and send freshbot out to have a look. It could have also been used to find new pages."
---zitat ende

quelle: https://www.webmasterworld.com/forum80/225.htm

von **Anzeige von ABAKUS** »

Beitrag von **Southmedia** » 24.11.2003, 21:52

So, mal wieder einen alten Post herauskramen.

Weiss mittlerweile jemand für was dieser "freshness_check" da ist?
Ich vermute mal eher nein. Werde das in der nächsten Zeit mal ein wenig mitloggen, evtl find ich ja raus um was es da genau geht und von was das abhängt.

Beitrag von **~bWM** » 30.12.2003, 16:28

Ich würd mich eher auf die checksum konzentrieren....

Beitrag von **chrise** » 02.01.2004, 05:45

~bWM hat geschrieben:Ich würd mich eher auf die checksum konzentrieren....

ein ganz schneller

Beitrag von **~bWM** » 02.01.2004, 14:15

chrise hat geschrieben:
~bWM hat geschrieben:Ich würd mich eher auf die checksum konzentrieren....
ein ganz schneller

Google hat mich zu diesem Thread geführt....

Beitrag von **naden** » 02.01.2004, 17:18

Unter der Vorraussetzung, dass die Chsumme nicht Serverseitig, über eine zusätzliche Anfrage, berechnet wird, wozu in den Logs allerdings nichts zu finden ist, sollte man davon ausgehen, dass der Algorithmus in der Google Toolbar steckt, also in "googlenav.dll".

Ein kurzes Disassembling leifert u.a. folgende Stringreferenzen:

StringData Ref from Data Obj ->"Checksums mismatch!"
StringData Ref from Data Obj ->"ERROR: Could not compute checksum.."
StringData Ref from Data Obj ->"ERROR: Could not extract checksum!"

Schaut man etwas oberhalb von "Checksums mismatch", so findet man schnell folgende Zeilen:

:1002AABD 8D4584 lea eax, dword ptr [ebp-7C]
:1002AAC0 6A14 push 00000014
:1002AAC2 50 push eax
:1002AAC3 8D8570FFFFFF lea eax, dword ptr [ebp+FFFFFF70]
:1002AAC9 50 push eax
:1002AACA E8B1520000 call 1002FD80 => vergleiche chsum
:1002AACF 83C40C add esp, 0000000C
:1002AAD2 85C0 test eax, eax => chsum compare ok
:1002AAD4 7418 je 1002AAEE => weiter gehts
andernfalls meldung falsche Checksum

Nun haben wir definitiv die Stelle, wo zwei Chsummen verglichen werden. Ein kleines Stückchen weiter oben findet man eine wahrschienlichte Stelle, wo das ganze berechnet wird. Wahrschienlich, weil ich hier nur ein Deadlisting und keinen Debugger habe.
Dieser call sieht sehr vielversprechend aus.
:1002AA8C E8FAFDFFFF call 1002A88B

Demnach müsste nur jemand mit mehr Zweit als ich die DLL beguggen, die Rooutine tracen und den Algorithmus nachprogrammieren.

Extrem schwer kann er meiner meinung nach nicht sein, man bedenke die
grösse der Checksumme in Bit ( annahme, wir haben Dezimalzahlen )

Dezimal Hex
63379182174 => 0E C1 B1 92 5E => 20 Bit
61368751100 => 0E 49 DC D3 FC => ebenso 20 bit

Natürlich könnte die ausgangzahl schon Hex sein, ist aber unwahrscheinlich, da in den Logs immer nur Dez. Zahlen auftauchen.

Mit Sicherheit kann man dies nur über einen Programm Trace rausfinden.

Ich hoffe ich habe einige Leute begeistert, und Ihr nehmt es zum Ansport Assembler zu lernen, Debuggen und das Geheimnis zu lüften. Ich versprechen euch, innerhalb von 8 Stunden habt Ihr das Problem gelöst, vorrausgesetzt, Google hat keine netten Überraschunegn im Code versteckt.

Beitrag von **Southmedia** » 02.01.2004, 17:29

Ähm, gut naden

Sagen wirs mal so, ich bin beeindruckt. Aber bin ich ja immer wenn ein "echter Programmierer" anfängt zu labern *g

Ein Problem ist dass ich beim mitloggen der Checksums auf pagerankcheck.de für eine Domain versch. Checksums bekomme. Aber ließe sich nach so nem nachprogrammieren sicher auch klären - ich kann sowas aber nicht. Bleib da lieber bei HTML, PHP und Co..

Beitrag von **naden** » 02.01.2004, 17:49

Eine simple Erklärung für verschiedene Checksummen wäre, das z.B. eine Checksumme nur in einem bestimmten Zeitfenster valide ist. D.h. ein Requst dauert per Definition 10 Sekunden, dann ist die Checksumme für 10+2 Sekunden valide um Missbrauch zu vermeiden.

Ein Ansatz, mal abgesehen von meinerm kurzen Intermezzo oben, könntest du ja
mal provokatik im Abstand von genau 1 Sekunde oder 10 Sekunde 100 mal die gleiche Domain abfragen.

Bei schlechten ( schwachen ) Checksummen, kann man sicher schon eine Symmetrie erkennen.

Wenn du das tust, würde mich das Ergebniss interessieren

Beitrag von **Southmedia** » 02.01.2004, 18:00

Sorry, hatte ich mich wohl übertrieben ausgedrückt. Die Checksum wechselt alle paar Wochen mal, ehrlich gesagt hab ich das aber auch nicht mehr so genau beobachtet weil es mir einfach nicht mehr so wichtig erschien - ist nur Pagerank!

Vielleicht findet sich ja jemand der die .dll noch weiter auseinandernimmt.

Beitrag von **~bWM** » 02.01.2004, 18:18

Southmedia hat geschrieben: Ein Problem ist dass ich beim mitloggen der Checksums auf pagerankcheck.de für eine Domain versch. Checksums bekomme.

Das würd mich auch interessieren, willst du die Ergebnisse nicht mal veröffentlichen

Beitrag von **Southmedia** » 02.01.2004, 18:31

Geh auf pagerankcheck.de und gib irgendwelche Domains ein. Da wirste dann schon welche entdecken bei denen es verschiedene Einträge gibt (domain.de & domain.de/ & www.domain.de & www.domain.de/ zählen jeweils als eigenständige domains!).

Beitrag von **~bWM** » 02.01.2004, 18:35

Southmedia hat geschrieben:Geh auf pagerankcheck.de und gib irgendwelche Domains ein. Da wirste dann schon welche entdecken bei denen es verschiedene Einträge gibt (domain.de & domain.de/ & www.domain.de & www.domain.de/ zählen jeweils als eigenständige domains!).

Ach so, das meinst du.... Ist klar das domain.de und domain.de/ verschiedene Checksummen liefern, dachte die cs von domain.de ändert sich im Laufe der Zeit....

Beitrag von **Southmedia** » 02.01.2004, 18:48

Ja das tut sie. Das war nur nochmal ein Hinweis damit ihr auch nur die wirklich gleichen Domainstrings miteinander vergleicht.

In der Datenbank kann es für www.domain.tld 2 verschiedene Checksums geben.