Expertenfrage (google und max execution time)

[dave88]

Hallo,

ich wollte mal fragen ob jemand Erfahrung bzgl. spidern von Seiten welche die Fehlermeldung max execution time hervorrufen.
Werden solche Seiten (falls dies eintrifft) gar nicht gespidert oder nur bis zur Fehlermeldung?

Gruss dave

[Arzt]

Wenn der jeweilige Crawler so viel Zeit mitbringt, zu warten, bis diese Fehlermeldung kommt, dann wird die Seite mit der Fehlermeldung auch in den SERPs auftauchen. Der Crawler weiss ja nicht, dass es eine Fehlermeldung ist.

[Southmedia]

Das ist nicht der Spider der die Fehlermeldung hervorruft, sondern dein mieses Script und dein lahmer Server...

Der Spider wird wohl vorher schon verschwinden weils ihm einfach zu lange dauert.

[dave88]

Wenn der jeweilige Crawler so viel Zeit mitbringt, zu warten, bis diese Fehlermeldung kommt, dann wird die Seite mit der Fehlermeldung auch in den SERPs auftauchen. Der Crawler weiss ja nicht, dass es eine Fehlermeldung ist.

habe ich in den Serps auch schon gefunden...

Das ist nicht der Spider der die Fehlermeldung hervorruft, sondern dein mieses Script und dein lahmer Server...

danke für die Blumen.

Der Spider wird wohl vorher schon verschwinden weils ihm einfach zu lange dauert

Weiss jemand wie lange ein Spider max. auf einer Seite crawlt?
Gibts da Erkenntnisse?

gruss dave