Herzlich willkommen im Archiv vom ABAKUS Online Marketing Forum
Du befindest Dich im Archiv vom ABAKUS Online Marketing Forum. Hier kannst Du Dich für das Forum mit den aktuellen Beiträgen registrieren.
wenn die robots richtig gemacht ist, dann hält sich google im regelfall daran.linux hat geschrieben:das ist keine lösung denn google ist robots.txt EGAL
ich habe das gestestet sie sind im index
gruß
linux
dann ist die robots.txt vielleicht nicht korrekt. habe auch seiten, wo ich den spider ausgeschlossen habe. er holt sich lediglich die robots.txt ab und keine einzige seite.linux hat geschrieben:naja ich habe die sache oft gesteet, und nicht nur ich. die seiten sind da denn er spidert sie,
der bot ist drauf also hat er sie auch
gruß
linux