Du befindest Dich im Archiv vom ABAKUS Online Marketing Forum. Hier kannst Du Dich für das Forum mit den aktuellen Beiträgen registrieren.

"serverkompetenz.net" - bad, bad bot?

Alles zum Thema: Robots, Spider, Logfile-Auswertung und Reports
JR-EWING
PostRank 9
PostRank 9
Beiträge: 1098
Registriert: 19.02.2004, 10:16
Wohnort: Untermeitingen

Beitrag von JR-EWING » 06.11.2006, 15:25

ja so seh ich das auch. HEAD für einen Check ob die Links bzw Dateien noch da sind - sinnvoll.
Aber zum Contentklau wohl kaum geeignet, deswegen wird das da auch angezweifelt.

Es sei denn
vielleicht wollen die ja auch keine großen Filme,MP3 oder sowas größeres ziehen sondern nur Texte. Deswegen erstmal mit HEAD und dann später mit GET
Da GET keine Dateigröße ausliefert können die da nicht gleich damit drauf gehen

Anzeige von ABAKUS

von Anzeige von ABAKUS »


Hochwertiger Linkaufbau bei ABAKUS:
  • Google-konformer Linkaufbau
  • nachhaltiges Ranking
  • Linkbuilding Angebote zu fairen Preisen
  • internationale Backlinks
Wir bieten Beratung und Umsetzung.
Jetzt anfragen: 0511 / 300325-0

SloMo
PostRank 10
PostRank 10
Beiträge: 4880
Registriert: 04.01.2005, 18:26

Beitrag von SloMo » 06.11.2006, 15:35

Doch, bei GET kommt auch der Header als Antwort. Also samt Größe und Mime-Type. Im Prinzip sind Skripte, die zuerst den HEAD anfragen, halt nur vorsichtig. Die wollen den Server nicht unnötig belasten.

Macht Google das nicht?

JR-EWING
PostRank 9
PostRank 9
Beiträge: 1098
Registriert: 19.02.2004, 10:16
Wohnort: Untermeitingen

Beitrag von JR-EWING » 06.11.2006, 15:45

mag sein - hab ich noch nicht darauf geachtet.

Google kenn ich nicht - suche immer mit altavista 8)

Anzeige von ABAKUS

von Anzeige von ABAKUS »

Content Erstellung von ABAKUS Internet Marketing
Ihre Vorteile:
  • einzigartige Texte
  • suchmaschinenoptimierte Inhalte
  • eine sinnvolle Content-Strategie
  • Beratung und Umsetzung
Jetzt anfragen: 0511 / 300325-0

SloMo
PostRank 10
PostRank 10
Beiträge: 4880
Registriert: 04.01.2005, 18:26

Beitrag von SloMo » 06.11.2006, 20:51

Sehr vorbildlich :D

Antworten