Wie oft kommen die Spider?

[Eddie]

Hallo allerseits,

koennt ihr mir sagen, wie ich rausbekommen kann, wie oft die grossen SuMa-Spider auf meine Seite kommen?
Ich habe hier ein paar GB Logfiles liegen, nur wie ich diese Frage beantworten soll... keine Ahnung :-/

Darum danke fuer eure Hilfe,
Eddie

[Eddie]

Hallo nochmal,

so, ich war die letzten Tage größtenteils offline, habe mich in dieser Zeit durch das Buch "Suchmaschinen-Optimierung" von Sebastian Erlhofer gelesen - jetzt bin ich aber was obige Frage angeht genauso schlau wie zuvor: zu Logfile-Analyse gab's da zwar ein Kapitel, stand aber nichts hilfreiches drin!

Ich waer euch sehr dankbar fuer eine kurze Antwort - auch wenn sie lautet "Das geht nicht!" Dann wüsste ich's immerhin...

Danke euch,
Eddie

[helixxx]

AWStats - da siehste wann sie das Letzte mal da waren & noch viel mehr..

[bugscout]

moin moin,

dafür gibt es eine menge möglichkeiten

1) in die serverstatistik schauen

2) ein editor (z.b. ultraedit), suche aufmachen, googlebot eintippen, count drücken, schon weiss man wie oft google da war

3) awstats, robotstats oder andere auf dem server installieren

4) software auf dem eigenen rechner installieren und auswerten

https://www.google.de/search?hl=de&c2co ... er&spell=1

grüsse

[Bauchladen]

Ich benutze seit einem viertel Jahr Robotstats und meine
Erfahrung ist, dass die Bots sehr eigenwillig sind was die
Uhrzeiten angehen. Man kann aber eines sagen: sie kommen
jeden Tag.

[serl]

Man kann aber eines sagen: sie kommen jeden Tag.

Das hängt von verschiedenen Faktoren ab, wie häufig ein Crawler vorbeikommt und wie lange er bleibt.

Robotsstats bietet nette Informationen, aber obwohl ein Plugin eingesetzt werden muss in jede PHP-Seite, welches die Besuche der Robots erkennt, gibt es nicht wesentlich mehr Informationen als bei einem Blick (oder einer Analyse) der Webserver-Logfiles (Nutzen/Kosten-Faktor).

In den Logs stehen nämlich auch alle Anfragen drin (um die Frage vom Anfang zu beantworten) und awstats und andere Tools zeigen die Anfragen an. Awstats bislang nur zusammengefasst (Name des Crawlers, Anzahl der Zugriffe, Bytes, Datum des letzten Zugriffs).

Fazit insb. für Eddie mit seinen GB an Logfiles: Robotstats hilft dir nichts mehr für eine nachträgliche Analyse. Je nach Logfile-Format und Webserver gibt es aber Tools zur Auswertung (z.B. Advanced Log Analyzer).

so long,
serl