Hallo zusammen, ich habe folgende Frage. Ich betreibe u.a. eine private Webseite, bei der ich möglichst genau steuern möchte, über welche Keywords auf die Seite kommen, bzw. unter welchen Keywords die Seite bei den Suchmaschinen gelistet wird. Ich habe festgestellt, dass man die Seite auch findet, w...
Hi! Dank der URL-Konsole von google ist das löschen von Suchmaschineneinträgen kein Problem mehr. Ander sieht das bei Yahoo & MSN aus. Ich möchte alle (eigenen) Einträge einer Webseite möglichst zügig verschwinden lassen und habe mir zwei "Stategien" überlegt. 1.) Einfach der Suchmasch...
Wenn ich mir meine Logs anschaue, dann erwische ich mit dieser Regel 99% aller Bots. Ich will ja nur Google, MSN & Yahoo spidern lassen, da es sich um ein privates web-projekt handelt. Die Seite muss nicht in der letzten ost-usbekischen Suchmaschine auftauchen. Traffic von Suchmaschinen kommt zu...
Hi. Ich habe mir eine .htaccess-Datei gebastelt, um zumindest einige unliebsame Bots auszusperren. Mir ist klar, dass ich damit nicht alle "bad bots" erwische, aber ich habe keine Lust auf eine bot-trap und will auch nicht ständig meine .htaccess-Datei pflegen u. aktualisieren müssen. Es s...
Na toll... Ich bin bei der betroffenen Domain mehr daran interessiert, dass nur relevante Einträge gelistet werden, als top Position etc., da es sich um eine private WS handelt. Macht es Sinn, den Slurp-Bot für eine Weile ganz auszusperren? Werden dann auch wirklich ALLE Einträge gelöscht? Oder blei...
hi! Erst einmal danke für die Antwort! Die Stylesheets sind schon richtig eingebunden (type='text/css'), daran kanns eigentlich nicht liegen. Die robots.txt hab ich schon zig mal durch zig Validatoren geschickt, alles okay. Laut den logs crawled slurp "verbotenen" Verzeichnisse auch nicht....
Hallo! Ich habe mit folgendem Eintrag einige Verzeichnisse vor der Indexierung gesperrt. Dennoch werden "Seiten" in diesem Unterverzeichnissen (bzw. Unterverzeichnisse innerhalb dieser Verzeichnisse) bei Yahoo gelistet. Im Detail handelt es sich dabei um Stylesheet-Dateien (xyz.css). Im Gr...