Ja, stimmt wohl. Wobei du dir ja mal https://www.majesticseo.com/ anschauen kannst, vielleicht bringt dir das SEO Tool was, welches die gecrawlten Daten mitnutzt.
Hast du dir mal die https://www.majestic12.co.uk/projects/d ... j12bot.php angeschaut?
Der Bot befolgt nämlich die Robots.txt. Da kannst du auch den Crawl-Delay-Parameter nutzen.
Ist das so schwer da mal nach zu schauen?
die neuen 1und1 IP's, die über Telefonica Backbone laufen sind total unbekannt
Hatte bisher noch keinen Service gesehen, der da was richtiges angezeigt hat.
Hi,
ich finde solche URL's > domain.de/sucategoryID=7/produktID=36276.html
einfach nur hässlich, wenn nicht sogar (bei einigen Webseiten) unprofessionell.
Wie gesagt, eine URL sollte genauso wie der Titel etwas über den Inhalt der Seite aussagen.
gmail ist es egal ob da punkte drin sind oder nicht
wenn dein username hallo.du.da ist dann kommen auch über halloduda h.a.l.l.o.d.u.d.a mails an
man kann auch irgendwie mit + arbeiten z.B. test+halloduda@gmail.com, wenn ich mich richtig erinnere
Hi, ich hab heute mal wieder meine Logs durchforstet und bin über folgende Useragents gestolpert: der hat eine Domain aufgerufen die per 301 auf die hauptdomain weiterleitet: IP: 131.107.0.96 Reverse-DNS: tide526.microsoft.com Useragent: Mozilla/4.0 (compatible; MSIE ...
Hi, wenn du mehrere Server meinst, brauchst du einfach bloß hintereinander die server oben auswählen und jeweils enter drücken, dann verbindet er und du kannst in den verschiedenen tabs arbeiten. Wenn du mehrere dateiaktionen gleichzeitig meinst, musst du die dateien oder ordner zuerst in den Tempor...
du könntest auch fragen, ob da jemand bei denen in der Lage ist, das in einen 301 zu ändern.
Vielleicht wissen die bloß nicht, dass das für die eingetragenen Seiten schädlich ist.
Hallöchen an die Community :wave: ich lese schon eine weile mit und hab schon einiges interessantes hier gefunden :) ich kann nur sagen spitze! Als ich eben in meine Logs geguckt hab, habe ich nicht schlecht gestaunt als ich 69 hits von folgendem Bot(?) gefunden hab IP: 85.74.27.36 Host: J1b24.j.ppp...