Seite 1 von 1
AdSense-Crawler kann nicht auf Ihre Websites zugreifen
Verfasst: 02.12.2008, 20:06
von Phantom20
Hallo,
habe gerade folgendes per Mail erhalten:
Hallo,
bei der Überprüfung Ihrer Anzeigenimplementierung ist uns aufgefallen, dass Ihre Datei "robots.txt" unseren AdSense-Crawler derzeit daran hindert, auf einige Seiten mit Anzeigen in Ihrem Konto zuzugreifen.
Zur Schaltung von zielgerichteten, bezahlten Anzeigen muss unser Crawler auf die Seiten Ihrer Websites zugreifen und ihren Content ermitteln können. Aktualisieren Sie die Datei "robots.txt" und gewähren Sie dem AdSense-Crawler Zugriff auf alle Seiten mit Google-Anzeigen. Sie gewähren dem AdSense-Crawler Zugriff auf Ihre Websites, indem Sie der Datei "robots.txt" folgende Zeilen hinzufügen:
User-agent: Mediapartners-Google*
Disallow:
Vielen Dank, dass wir auf Ihren Websites die relevantesten Anzeigen schalten können. Beachten Sie, dass wir künftig die Anzeigenschaltung für Webseiten deaktivieren, die wir nicht crawlen können.
Weitere Informationen hierzu erhalten Sie unter:
https://www.google.com/adsense/support/ ... 7091&hl=de
Vielen Dank für Ihr Verständnis.
Mit freundlichen Grüßen
Ihr Google AdSense-Team
Google Inc.
1600 Amphitheatre Parkway
Mountain View, CA 94043
Sie erhalten diese Benachrichtigung, da wir Sie über ein Problem mit einer Ihrer Websites, mit der Sie an Google AdSense teilnehmen, informieren möchten.
Würde ja bedeuten, dass ich auf alle urls, die in der robots.txt ausgeschlossen sind, kein Adsense schalten kann. Ist aber nicht ganz machbar, da bei Foren beispielsweise der header oder footer greift, egal für welche url, wo Adsense eingeblendet ist.
Meint Google mit "Beachten Sie, dass wir künftig die Anzeigenschaltung für Webseiten deaktivieren, die wir nicht crawlen können. " die jeweiligen urls / Unterseiten oder die ganze Domain?
Gruß
Verfasst:
von
Content Erstellung von
ABAKUS Internet Marketing
Ihre Vorteile:
- einzigartige Texte
- suchmaschinenoptimierte Inhalte
- eine sinnvolle Content-Strategie
- Beratung und Umsetzung
Jetzt anfragen:
0511 / 300325-0
Verfasst: 02.12.2008, 20:20
von r-alf
G-Adsens meint die URL
Re: AdSense-Crawler kann nicht auf Ihre Websites zugreifen
Verfasst: 02.12.2008, 20:22
von dirk30
Phantom20 hat geschrieben:Hallo,
habe gerade folgendes per Mail erhalten:
Würde ja bedeuten, dass ich auf alle urls, die in der robots.txt ausgeschlossen sind, kein Adsense schalten kann.
Gruß
Brauchst doch einfach nur den Mediabot "freischalten" den normalen Googlebot kannst ja draussen lassen.
Verfasst: 02.12.2008, 20:37
von Phantom20
Achso, verstehe.
Da ich auch "User-agent: *" derzeit in der robots.txt habe und somit die urls für alle Robots aussperre. Sprich: Die wollen nur, dass ich in all meinen robots.txt die Zeile:
User-agent: Mediapartners-Google*
Disallow:
hinzufüge? Wenn ich bei einem Projekt keine robots.txt habe, dann brauch ich ja eigentlich auch keine mit dem oben genannten Eintrag zu erstellen, da ja nichts ausgeperrt wird. Oder richtet ihr trotzdem eine ein?
Danke euch.
Verfasst: 02.12.2008, 21:26
von dirk30
Bist sicher das die Mail von Google ist weil eigentlich sollte es nicht disallow heisen sonder allow damit der Mediaboot Zugriff kriegt:
User-Agent: Mediapartners-Google
Allow:
Verfasst: 02.12.2008, 21:51
von e-fee
dirk30 hat geschrieben:Bist sicher das die Mail von Google ist weil eigentlich sollte es nicht disallow heisen sonder allow damit der Mediaboot Zugriff kriegt:
User-Agent: Mediapartners-Google
Allow:
Sicher?
Das mit dem Disallow ist schon korrekt, es heißt so in etwa, dass das Disallow für gar nix gilt, da ja auch nix dahinter steht.
Wenn da "Disallow /" stände, DANN würde man den Bot von der ganzen Seite aussperren!
Verfasst: 02.12.2008, 21:54
von dirk30
ok das habe ich nicht beachtet habe nur das dis... gesehen
Verfasst: 03.12.2008, 00:43
von wehwehweh
hallo, ich habe gerade das gleiche mail erhalten. obwohl gar nicht mehr aktuell, hab alle anzeigen auf seiten die für den bot gesperrt waren schon vor 2 oder 3 wochen rausgenommen.
Verfasst: 03.12.2008, 13:48
von Phantom20
Denke schon das die Mail echt ist, zudem trifft es in meinem Fall auch zu.
Ich werde in Kürze auch meine robots.txt erweitern.
Bleibt nur noch die Frage offen, ob ich bei Projekte, die derzeit gar keine robots.txt haben, überhaupt eine anlegen soll mit diesem Inhalt? (da ja derzeit auch nix ausgesperrt wird brauche ich m. E. keine)
@wehwehweh
Vielleicht wurde von der technischen Seite das schon vor einigen wochen gestartet, bei wem das zutrifft.
Verfasst: 04.12.2008, 16:10
von late-night
Ich hatte die gleiche Mail erhalten und nun in meiner robots.txt folgendes eingefügt:
User-agent: Mediapartners-Google*
Disallow:
User-agent: *
Disallow: /*sid=*
Disallow: /search.php
Disallow: /login.php
Disallow: /admin/
Hat nun der Mediapartner Bot Zugriff auf alles oder hebt das darunter:
User-agent: *
es wieder auf?
Grüße
Verfasst: 04.12.2008, 16:15
von twiggie
Ich würde erst ausschließen - dann einschließen. Also andersherum.
Google wirds aber wahrscheinlich piep egal sein wenn Sie direkt angesprochen werden.
Twigg
Verfasst: 04.12.2008, 16:22
von heinrich
Verfasst: 04.12.2008, 16:25
von late-night
@twiggie:
google schreibt aber selbst, dass Ihr code ganz oben stehen sollte...mmhhh
Verfasst: 04.12.2008, 16:30
von twiggie
Google Adsense hat geschrieben:
...Sie gewähren dem AdSense-Crawler Zugriff auf Ihre Websites, indem Sie der Datei "robots.txt" folgende Zeilen hinzufügen:...
Hinzufügen ist bei mir nicht Einfügen. Aber was soll die Wortklauberei.
Ich persönlich bin ziemlich sicher es wird egal sein. Der Media Partners Bot bekommt grünes Licht und gut ist.
Twigg
