nachdem ich, mit neuer robots.txt, meine URL wieder an den index gesendet habe, wie lange kann das dauern bis sie in den suchergebnissen wieder auftaucht? dh wie lang braucht google zum erneuten crawlen der seite
ja also die startseite (index.php) liegt im root und die webseite ist auch über www.amazon.de/ zu erreichen. trotzdem konnte googlebot die seite nicht crawlen mit obiger robots.txt ich hab jetzt alles raus genommen bis auf: User-agent: * Disallow: /admin/ Sitemap: https://www.amazon.de/sitemap.xml u...
hallo. hier eine beginner frage. die zeile Disallow: /*.php$ in robots.txt blockt ja auch index.php, oder? wird mit der startseite dann die gesamte seite geblockt? ich habe diesen eintrag bei einigen tutorials und seiten gefunden und einfach mal dummerweise ausprobiert. jetzt sagt webmastertools &qu...