wenn man eine seite mit robots.txt ausschliesst.

Beitrag von **mauri** » 24.09.2003, 06:29

wie lange dauert es bis google sie aus dem index abschiesst?
gruss
mauri

von **Anzeige von ABAKUS** »

Beitrag von **UweT** » 24.09.2003, 06:48

eigentlich bei jedem besuch des bots... ist der erste weg auf dem host die robots zu suchen und zu lesen.

Beitrag von **mauri** » 24.09.2003, 07:10

tbone78, klar, aber die seiten die ich nun blockiert habe, kann google somit nicht mehr spidern und wird sie wohl aus seinem index schmeissen*hope*
denn eine seite die fuer google nicht mehr da ist , wird sich ja auch nicht in seinem index halten.
nur wie lange dauert es, bis google sie aus seinem index schmeisst.
gruesse
mauri mit neuer pr3

von **Anzeige von ABAKUS** »

Beitrag von **UweT** » 24.09.2003, 07:57

wie die seite existiert nimmer oder .. sie existiert noch nur in der robots ist sie geblockt?

Beitrag von **mauri** » 24.09.2003, 08:01

genau > nur in der robots ist sie geblockt.

Beitrag von **UweT** » 24.09.2003, 08:35

dann fallen sie nicht aus dem index.... denn google steuert seiten die nicht mehr "für den bot" erreichbar sind, jedoch noch im index stehen, aller 4 wochen direkt an um zu sehen ob sie aktualisiert wurden...

ich würde so vorgehen...
robots wieder für die seiten die raus sollen freigeben und in die seiten die raus sollen einen "no index" meta einbauen, dann fliegen sie recht rasch aus dem index, danach die robots aktivieren, dass der bot sie nichtmehr neu indexieren kann und den "no index tag" kann man dann entweder wieder entfernen oder drinn stehen lassen.

gruß
tbone.

Beitrag von **mauri** » 24.09.2003, 09:49

*seuftz* danke !
bin gerade dabei alle einzeln rauszuschmeissen

Beitrag von **mauri** » 24.09.2003, 10:15

fertig + meine finger + 100 sites are now on the pending list.
na da schaun wa mal

Beitrag von **bugscout** » 24.09.2003, 10:24

moin mauri,

editor starten,
alle seiten auf,
replace (all open sites),
save all,
close all,

10 sec

grüsse

Beitrag von **mauri** » 24.09.2003, 10:34

hi bugscout,
man muss sie einzeln in google eintragen, weil ich nicht das ganze forum kicken wollte.

Remove a single page using meta tags.
You must insert the appropriate meta tags before proceeding. If you have not, please return to our Remove URL page for further information.

Note: Your page will remain out of Google's index as long as it contains the appropriate meta tags.

meine angst steckt da im "NOTE":
soll das heissen, wenn meine robots txt die seiten sperrt, wird google sie trotzdem wieder aufnehmen wenn ich den noindex tag rausnehme????

wat en kram eh.

Beitrag von **bugscout** » 24.09.2003, 10:42

moin mauri,

wenn du sie aus dem index löscht

und in der robots.txt sperrst

sollte sie nicht wieder indexiert werden.

aber wieso das noindex nicht auf den seiten lassen?

zur sicherheit.

grüsse

Beitrag von **UweT** » 24.09.2003, 10:43

kannst den tag doch auch drinne lassen .. die paar bytes machen das kraut nicht fett... wo ist das problem?

Beitrag von **mauri** » 24.09.2003, 10:48

weil es mein forum ist > und ich keine moeglichkeit habe > die ungewuenschten seiten, zu trennen von den gewuenschten. somit versuche ich gerade die ganzen doppelten eintraege die mit sutra ptopic etc drin haben, wieder rauszuschmeissen und in zukunft > google sie nicht spidern zu lassen.
ich hoffe google, geht in zukunft ueber die txt file und steuert sie nicht direkt an.

aber schon affig das system> bei bildern > kannste den rausschmiss in der txt file bestimmen, warum so ein aufwand bei einer page.
nicht ganz logisch ist.

gruesse
mauri

Beitrag von **bugscout** » 24.09.2003, 11:12

moin moin,

versteh ich nicht,

wenn du einzelne seiten gelöscht hast, können
doch auch einzelne seiten auf noindex bleiben.

die ungewuenschten seiten, zu trennen von den gewuenschten

und wie trennst du die mit robots.txt

grüsse

Beitrag von **mauri** » 24.09.2003, 11:27

hi hi
wie dieses forum hier> PHPBB, du kannst deine meta tags in nur einer overallheader file bestimmen. das bedeutet> wenn ich noindex dort reinschreib > bekommt das ganze forum jedes topic einen no index tag.
weil das phpbb forum normal php endungen hat. habe ich einen rewrite mode drin > der dies aendert zu html.
ABER> ich bekomme nicht nur schoene uris wie .../forum/ftopic25.html erstellt, sondern auch .../forum/sutrakaramellbonbon16-*4 oder .../forum/ptopic25.html.
letztere ist somit eine doppelt page.
warum das beim aendern, von php zu html passiert > fragt man einen dau nicht

nun habe ich die ganzen rotz> der "schlechten" uris aus google geloaescht (oder er ist noch dran, google sagt in 24 stunden), muss dazu aber den noindex tag drin haben. wenn google nun die url's rausschmeisst> werde ich sofort wieder hingehen und den noindex tag rausnehmen> da ich ja will das google die schoenen uris verfolgt. aber gedenke nun eine robots txt file zu haben > die google davon abhaelt die sutra und ptopics zu spidern.

tatsache ist > das google 194 seiten im index hat, ~100 davon mit mist und doppelten seiten (siehe oben erklaert)

darum denke ich auch, bin ich abgekacht von pr4 zu pr3, da google 50% mist sieht.

hoffe das erklaert meine missliche lage
gruss
mauri