die short-url legende?

[bugscout]

moin moin,

alle welt weiss ja, dass google short-urls liebt, nur google nicht?

habe vor einigen wochen ein cms aufgesetzt, das die urls umschreibt.

danach war google des öfteren zu besuch und hat es geschafft 192 seiten in den index zu bekommen.

vor 4 tagen musste ich zum rumfriggeln (ich baue grundsätzlich jedes cms um) für 2 stunden den rewrite abschalten.
google hat in der zwischenzeit natürlich ordentlich gespidert.

danach habe ich die short-url wieder angeschaltet und auch keinen falschen link mehr auf der seite (mit linkchecker getestet).

seit dieser zeit besucht google nur noch seiten die mit variablen aufgebaut sind. kein aufruf mit shorturls mehr zu sehen.

und das wirklich spannende; es befinden sich seit der zeit 3400 seiten im index (ganz soviele gibt es noch nicht, sollte aber von der problematik herkommen, dass die ganzen weiter- und umblätter-links immer fleissig double-content produzieren)

grüsse und schönen sonntag

[Airport1]

> alle welt weiss ja, dass google short-urls liebt, nur google nicht?

Damit hab ich ein Interpretationsproblem. Was ist hiermit gemeint? Das geht schon wieder in Richtung Barbier, der alle rasiert die sich selber nicht rasieren, ob er sich selber rasiert?

[bugscout]

moin moin,

google ist halt nicht alle welt

grüsse

[Chris2005]

@bugscout:

Dann bau in die robots.txt folgendes ein.

Code: Alles auswählen

User-Agent: Googlebot
Disallow: /*?

Das funktioniert wunderbar um Google die Indexierung von dynamischen Links zu verbieten. Auch wenn hier im Forum immer wieder gegenteilige Meinungen zu lesen sind.

Dann solltest Du einen Deepcrawl abwarten und nach und nach verschwinden die dynamischen Links.

[bugscout]

moin moin,

habe natürlich auch noch brav xml gelernt und ne google-sitemap erstellt.

die links haben 0 zugriff.

disallow werd ich mal testen. bis jetzt waren meine wildcard erfahrungen eher negativ.

grüsse

[derHund]

Auch wenn hier im Forum immer wieder gegenteilige Meinungen zu lesen sind.

das liegt meiner meinung nach daran, daß diese syntax vollkommen falsch ist, zumindest laut res nicht das bewirkt, was angedacht ist. wie allerdings google das handled, weiß ich nicht - falsch ists zumindest allemal.

[Chris2005]

@derHund: Wenn ich den o.a. Parameter nur in die Googlebotsektion einbaue, dann gibt es keine Probleme. Benutze ich bei mir seit geraumer Zeit ohne Schwierigkeiten.

msn und slurp werden nicht dadurch verwirrt.

Dass das nicht dem Exclusion Standard entspricht, steht auf einem anderen Blatt.

[bbnetch]

funkt bei mir total nicht...habs seit monaten drin.

ich gehe aber mal davon aus, das die php seiten nicht verschwinden, weil sie einfach zu viel linkpop haben.
handelt sich bei mir um ein php forum, und ich denke das koenten auch interne links sein, weil hinweise auf andere threads, die eben noch das php im url haben.

auch von auswertigen seiten bekomme ich solche links, darum halte ich es fuer moeglich, das google dies deshalb ignoriert.

fackt ist User-Agent: Googlebot Disallow: /*? funkt nicht bei mir !

[manuelfu]

Könnte man das nicht per redirect 301 lösen ?

Gruß,
Manuel