hallo forum,
der googlebot kommt regelmäßig unsere seite zu indizieren.
nun hat er aber in gut einem jahr knapp 8.000 seiten im index.
wenn ich nun eine robot.txt anlege und die unwichtigen seiten unserer plattform eintrage, erreiche ich dann das der googlebot schneller die wichtigsten seiten indiziert?
also kurz gesagt:
ich sgae dem bot wo er nicht hin soll und dafür geht er dann schneller zu den wichtigen seiten...
vielen dank für eure hilfe!
Archiv
