Mozilla/5.0 (compatible; vermut +http://vermut.aol.com)

[Fox Mulder]

Ob er gut oder böse ist weiß ich (noch) nicht.

Mozilla/5.0 (compatible; vermut +https://vermut.aol.com)

https://vermut.aol.com

Gruss

[bull]

Was war denn die IP ?
Finde nämlich weder Suchschlitz noch Angabe des User-agents, welcher in die robots.txt einzufügen wäre. Und das ist für mich ein Ausschlußkriterium.

[Fox Mulder]

Was war denn die IP ?

59.160.131.33

Traceroute geht nach Indien:
--------------------------------------------------------
trying to get source for 59.160.131.33
source should be 193.141.98.37
traceroute to 59.160.131.33 (59.160.131.33) from 193.141.98.37 (193.141.98.37), 30 hops max
outgoing MTU = 1500
1 cishelios2.helios.de (193.141.98.1) 4 ms 4 ms 4 ms
2 pop9.pop-hannover.de (193.98.1.212) 14 ms 14 ms 14 ms
3 popcore.pop-hannover.de (193.98.1.213) 17 ms 14 ms 14 ms
4 ar3.haj.de.colt.net (213.61.144.17) 15 ms 15 ms 16 ms
5 213.61.232.45 (213.61.232.45) 15 ms 15 ms 15 ms
6 212.74.65.170 (212.74.65.170) 26 ms 27 ms 26 ms
7 ge-1-1-0.ar2.fra3.gblx.net (80.81.192.39) 115 ms 115 ms 115 ms
8 so6-0-0-2488M.ar2.LON3.gblx.net (67.17.66.2) 114 ms 116 ms 115 ms
9 VSNL.ge-1-2-0.ar2.LON3.gblx.net (208.51.86.114) 117 ms 115 ms 117 ms
10 219.64.254.1.mpls-vpn-ibb.static.vsnl.net.in (219.64.254.1) 247 ms 249 ms 246 ms
11 219.64.254.1.mpls-vpn-ibb.static.vsnl.net.in (219.64.254.1) 248 ms 246 ms 247 ms
12 vsb-cr2.amu1.Bbone.vsnl.net.in (202.54.2.114) 251 ms 253 ms 252 ms
13 chn-mum-1st-stm1.Bbone.vsnl.net.in (202.54.2.222) 312 ms 312 ms 311 ms
14 bgl-mum-2nd-stm1.Bbone.vsnl.net.in (202.54.2.38) 332 ms 349 ms 331 ms
15 202.54.84.85 (202.54.84.85) 333 ms 332 ms 332 ms
16 203.200.27.252.ill-bgl.static.vsnl.net.in (203.200.27.252) 346 ms 347 ms 337 ms
17 *
--------------------------------------------------------

Gruss

[thetrasher]

Die Fußzeile:

©2006 America Online, Inc. All Rights Reserved.

Demnach ist es ein offizieller AOL-Service.

Kooperiert AOL nicht schon mit Google? Bei den Suchergebnissen steht "Powered by Google". Wieso setzen die jetzt eine eigene Spinne ins Netz?

Wieviele Bots brauchen wir noch? Soll ich jetzt auch noch ein paar Bots schreiben? G++ :microwave:

EDIT: https://www.webmasterworld.com/forum11/3184.htm