ABAKUS

meiner Erfahrung nach beachtet Google das NICHT immer. Welche Kriterien da zugrunde liegen, vermag ich jedoch nicht zu sagen. Fakt ist jedoch, dass es nicht "wasserdicht" ist.

Ja bestimmt wenn mal ein HTMLer sich sowas wie "no-follow" statt "nofollow"
wir haben ja in den letzten jahren an den tausenden erfundenen MetaTags und Robots.txts gesehen, dass manche sich einfach was zusammen dichten.

HI,

Habe bei einen neuen Projekt die Erfahrung gemacht das der bot sich an keine Anweisung hält

nicht an:

noindex,nofollow

nicht an:

User-agent: googlebot
Disallow: /*.php


sicher erscheint nur eine .htaccess Lösung

Kennt jemand einen Lösungsansatz für eine .htaccess?

vielleicht mit:
SetEnvIfNoCase Referer


RW

RW hat geschrieben:HI,

Habe bei einen neuen Projekt die Erfahrung gemacht das der bot sich an keine Anweisung hält

nicht an:

noindex,nofollow

damit habe ich ähnliche erfahrungen gemacht.

bei einem meiner projekte hatten alle seiten einen pr, nur eine nicht. bei der suche nach der ursache habe ich festgestellt, das ich "noindex, nofollow" in den metas hatte. die seite war aber trotzdem im google-index.
das ganze geändert in "index, follow", und die seite hat seit dem letzten pr-update einen pr.

gruss, uli

RW hat geschrieben: nicht an:

User-agent: googlebot
Disallow: /*.php

die syntax ist ja auch ungültig. beim disallow hast du keine möglichkeit, einen platzhalter anzugeben, meines wissens nach. alle urls, die mit der bei disallow angegebenen zeichenkette beginnen, werden ausgeschlossen.

axelm hat geschrieben:Ja bestimmt wenn mal ein HTMLer sich sowas wie "no-follow" statt "nofollow"
wir haben ja in den letzten jahren an den tausenden erfundenen MetaTags und Robots.txts gesehen, dass manche sich einfach was zusammen dichten.

Nein, mit gültigem "nofollow". Habs probiert:
Eine neu angemeldete Domain hab ich auf unserer dicksten Seite verlinkt mit "nofollow" und sie wurde dennoch einen Tag später vom Bot indiziert (kein AdSense, kein AdWords geschaltet, keine Anmeldung in anderen Maschinen, keine anderen Links). Eine andere Domain auf einer kleineren Domain verlinkt wurde hingegen missachtet durch "nofollow".
Ob das jetzt was mit der Stärke der verlinkenden Domains zu tun hat kann ich nicht sagen, kann auch Zufall sein, müsste man eingehender testen.
Jedenfalls zeigt mir das, dass das Ganze nicht wasserdicht ist.

*achselzuck* weiß ja auch nicht wo da der Sinn liegt.

hmm

also ich hatte mal ne phpinfo.php die 100% nirgends verlinkt war (weder mit nofollow noch mit no-follow etc)

diese hatte nen pr4..

fragt sich wie?

Googlebot spidert sowieso alles, was er finden kann und missachtet dabei auch ein <meta name="robots" content="noindex, nofollow">

Aber das Attribut rel="nofollow" soll meines Wissens ja nicht vom Indizieren einer Seite abhalten sondern vielmehr von der PR-Weitergabe. (Wurde auch hier im Forum schon diskutiert.) Ob es funktioniert, schon einmal funktioniert hat oder jemals funktionieren wird, weiß ich nicht.

LG, Hobby-SEO

Hallo,
also meiner Erfahrung nach bringt rel="nofollow" etwas.
Hatte bei meinem Phorum größere Probs mit DC. Dieses Problem ist aber zum Glück rückläufig, seitdem ich bestimmte interne Steuerungslinks mit diesem Attribut versehen habe. Selbst der Mozillabot holt seitdem sichtbar weniger dieser Seiten. (zum Beispiel Quote-Aufrufe) Aus den Serps verschwinden diese Seiten so nach und nach.

Um die alten zu blocken habe ich zusätzlich bei Aufrufen mit bestimmten Parametern
im Header NOINDEX; FOLLOW gesetzt.

Google wie auch MSN spidern ein paar Mal drüber und dann herrscht mehr oder minder Ruhe. Die Versuche werden zum Glück immer seltener.

Ich kann die von manchen gemachten negativen Erfahrungen dementsprechend nicht bestätigen.

Gruß
Berti

RW schrieb:

nicht an:
User-agent: googlebot
Disallow: /*.php

Wie wär´s mal mit
User-agent: Googlebot
Disallow: /*.php$

Das Finale.

@luigip

War ein Tipfehler von mir

User-agent: Googlebot
Disallow: /*.php$

Dieser Syntax steht bei mir in der robots.txt


RW

Wow! THX für die reichhaltigen Antworten
Will niemanden zu Nahe treten, aber kann das sein, das einige das Nofollow der site metas meinen? Ich rede speziell vom rel="nofollow" in <a href......>-tag.

Twigg