Seite 1 von 1

welche Dateigröße wird noch gespidert?

Verfasst: 17.02.2006, 18:55
von ffa
ich habe eine Sitemap Datei mit internen Links zu allen 10.000 Produkten erstellt. Die Datei ist nun alleine schon 2,7 MB groß.
Wird die Datei überhaupt noch von den Robots gespidert?
In welche KB Häppchen sollte man so eine Sitemap aufteilen?

Verfasst:
von

welche Dateigröße wird noch gespidert?

Verfasst: 17.02.2006, 19:01
von ole1210
Es wird immerwieder gesagt, das ne Seite nicht mehr alls 100 Links enthalten sollte. Du müsstest deine Seite also in 101 kleine Seiten Aufteilen.

100x100 = 10.000 und eine Als Sitemap für die 100 Dateien...

Hab ebei mir auf ner Sitemap ca. 140 Seiten. Wird fast täglich gespidert.

Aber 2,7 MB gibt auch ne Menge Traffic.....

welche Dateigröße wird noch gespidert?

Verfasst: 20.02.2006, 11:57
von ffa
Seit dem Wochenende ist die Seite im Cache von Google.
Hier sind fast genau 100kb von den 2,7 MB im Cache gelistet.

Hat schon jemand Erfahrung ob auch nur die Dateigröße "ausgewertet" wird, oder ist das nur ein Limit von Dateigrößen im Google Cache?

Verfasst:
von

welche Dateigröße wird noch gespidert?

Verfasst: 21.02.2006, 11:47
von Oliver Henniges
Ich habe eine 70MByte große PDF-Datei (ein Lieferantenkatalog) angekoppelt. Wenn ich meine google-sitemap aktualisiere, geht die bei jedem zweiten mal durch, die andere Hälfte gibts einen timeout. Ich denke aber 2,7 MB dürften für den spider kein großes Problem sein.

Daß die links dann kaum noch was wert sind, ist eine andere Sache.

Re: welche Dateigröße wird noch gespidert?

Verfasst: 21.02.2006, 12:50
von nachfolger
ffa hat geschrieben:Seit dem Wochenende ist die Seite im Cache von Google.
Hier sind fast genau 100kb von den 2,7 MB im Cache gelistet.
Eine Bestätigung der Aussage von Sebastian Erlhofer in seinem Buch "Suchmaschinen-Optimierung für Webentwickler" ?

Er sagt auf Seite 97/98 dass google lediglich 101 Kilobyte einer Webseite untersucht.

welche Dateigröße wird noch gespidert?

Verfasst: 21.02.2006, 13:31
von Hasenhuf
Das kann ich an einem Beispiel widerlegen. Besser gesagt ich konnte. Da ich den code schlanker gemacht habe, ist die Datei jetzt genau 100kB groß, sie wurde aber auch mit 137kB mit einem der letzten Worte gefunden.

welche Dateigröße wird noch gespidert?

Verfasst: 21.02.2006, 13:44
von Mr.Neiz
also wenn man den google sitemap service benutzt, werden locker grössen von 800-900kb gespidert....
vielleicht einfach mal deine sitemap dort bereitstellen und schauen was passiert...:-)
es sei den du willst die datei deinen kunden bereitstellen...

Verfasst: 21.02.2006, 13:56
von ole1210
Die größte Datei die aktuell auf einem Proekt liegt ist ein 121kb großes html-File.

Ist von google bis in die letzte Zeile gespidert und auch mit 121kb im Cache.