HiJacking-Liste + Linkprüfung

[terese0815]

@terese

Ansonsten wird nun auch die robots.txt überprüft und nur Seiten in die Liste übernommen welche einen 302 oder Meta-Refresh machen und diese Seiten auch nicht per robots.txt aussperren.

grad mal einige urls überprüft hab', robots.txt wird sauber erkannt...

Ich habe mich selber auch gewundert

[anjaka]

Eine bescheidene Frage hätte ich.
Ich habe in der robots die outbound.pl ebenfalls ausgesperrt
Disallow: /outbound.pl
allerdings wird dies bei der Linkprüfung, anders als bei Abakus, nicht erkannt und es kommt eine Warnung.
Ich habe dafür keine Erklärung. Kann mir da mal jemand auf die Sprünge helfen?

[terese0815]

Ne. Wie heißt denn die Seite?

[anjaka]

Ne. Wie heißt denn die Seite?

PN ist raus

[viggen]

@terese

eine gute Sache wäre noch in Englisch und eine kleine Bemerkung im WMW-Forum, dann bist Du aber für ein paar Tage beschäftigt... Die Übersetzung wäre doch was für unseren lieben Viggen... ihn kurz schupst

Schlechtes Timing, bin gerade mitten im Umzug nach Südafrika, daher habe ich unzählige dinge die ich erledigen muss, ansonsten gerne...

mfg
viggen

[mario]

@terese
eine gute Sache wäre noch in Englisch und eine kleine Bemerkung im WMW-Forum, dann bist Du aber für ein paar Tage beschäftigt... Die Übersetzung wäre doch was für unseren lieben Viggen... ihn kurz schupst

Schlechtes Timing, bin gerade mitten im Umzug nach Südafrika, daher habe ich unzählige dinge die ich erledigen muss, ansonsten gerne...
mfg
viggen

@terese

vielleicht lässt sich ja eine andere gute Seele finden... und Dir lieber Ch... schon mal schöne Reise und einen guten Start in RAS. Man sieht sich, hoffentlich bald wieder.

[terese0815]

Ist kein Problem. Wir haben das gestern noch übersetzt. Für Fehlerfreiheit können wir da aber noch weniger garantieren als im deutschen Text;)

[Septober]

Hallo Zusammen,

ich habe das mal mit einer Weiterleitung von meinen Seiten getestet.

Folgende Ausgabe

Schritt 3: Überprüfe die robots.txt der Zielseite... [Bitte warten]

Warnung: "https://www.peele.de/go.php?id=16" wird nicht durch die robots.txt ausgesperrt.


Inhalt der robots.txt:

User-agent: *
Disallow: /login.php
Disallow: /*?

User-agent: psbot
Disallow: /

User-agent: googlebot
Disallow: /rezepte.php
Disallow: /*?

User-agent: msnbot
Disallow: /rezepte.php

ist nicht ganz korrekt. Mit der Anweisung Disallow: /*? habe ich alle dynamischen Gesperrt. Sogar google hält sich daran.

Gruß

Günter

[terese0815]

Hallo Günter,

wir haben da ein Problem das * zu interpretieren. Vielen Dank für den Hinweis. Wir werden das noch heute ändern.


Grüße

Stefan

[robo]

Stefan:

Habe mir mal den Spass gemacht und ein paar Verzeichnisse überprüft und eingetragen. Eines habe ich gefunden, dass offensichtlich mit 302 weiterleitet, bei dem aber dein Script irgendwie ein Problem bei der Analyse hat. Wie kann ich dir denn den Link zum überprüfen zukommen lassen?

cu, Robo

[terese0815]

hi robo,

einfach per pn oder an die mail welche im impressum steht.

grüße

stefan

[robo]

Hi Stefan,

hab jetzt ein paar URLs an die Adresse im Impressum geschickt. Hoffe, du findest das Problem.

cu, Robo

[Fridaynite]

Code: Alles auswählen

User-agent: *
Disallow: /readmore.php

nimmt alles raus was dahinter kommt - auch ein ? oder sonstwas.

[terese0815]

Hallo Zusammen,

ich habe das mal mit einer Weiterleitung von meinen Seiten getestet.

Folgende Ausgabe

Schritt 3: Überprüfe die robots.txt der Zielseite... [Bitte warten]

Warnung: "https://www.peele.de/go.php?id=16" wird nicht durch die robots.txt ausgesperrt.


Inhalt der robots.txt:

User-agent: *
Disallow: /login.php
Disallow: /*?

User-agent: psbot
Disallow: /

User-agent: googlebot
Disallow: /rezepte.php
Disallow: /*?

User-agent: msnbot
Disallow: /rezepte.php

ist nicht ganz korrekt. Mit der Anweisung Disallow: /*? habe ich alle dynamischen Gesperrt. Sogar google hält sich daran.

Gruß

Günter

Halllo Günter,

wird jetzt auch richtig erkannt.


Grüße

Stefan

[LTX]

hi,

https://www.webconfs.com/redirect-check.php

hier funktioniert der header-check auf jeden fall besser!