Inktomi, Fast bezahlt

Beitrag von **Boa** » 02.02.2004, 23:45

Ne Spiders.txt im includes verzeichnis.

von **Anzeige von ABAKUS** »

Beitrag von **golop** » 02.02.2004, 23:49

dort habe ich nur eine spider_configure.php, wo die Spider drin sind die zulässig sind und welche nicht...

Hast Du dort eine andere Lösung oder Erweiterung. Liest DU die Daten von ein TXT-Datei an. Wenn ja ist da ja komfortabler....

Sag mal, wie Du das machst

Gruß und nun wirklich bis morgen
golop

Beitrag von **Boa** » 02.02.2004, 23:56

Code: Alles auswählen

$Id&#58; spiders.txt,v 1.2 2003/05/05 17&#58;58&#58;17 dgw_ Exp $
almaden.ibm.com
appie 1.1
architext
ask jeeves
asterias2.0
augurfind
baiduspider
bannana_bot
bdcindexer
crawler
crawler@fast
docomo
fast-webcrawler
fluffy the spider
frooglebot
geobot
googlebot
gulliver
henrythemiragorobot
ia_archiver
infoseek
kit_fireball
lachesis
lycos_spider
mantraagent
mercator
moget/1.0
muscatferret
nationaldirectory-webspider
naverrobot
ncsa beta
netresearchserver
ng/1.0
osis-project
polybot
pompos
scooter
seventwentyfour
sidewinder
sleek spider
slurp/si
slurp@inktomi.com
steeler/1.3
szukacz
t-h-u-n-d-e-r-s-t-o-n-e
teoma
turnitinbot
ultraseek
vagabondo
voilabot
w3c_validator
zao/0
zyborg/1.0

Wenn jemand noch Erweiterungen kennt wäre auch nicht schlimm

von **Anzeige von ABAKUS** »

Beitrag von **golop** » 03.02.2004, 12:56

Hi,

mein Spider werden ja direkt in der php-Datei definiert. Wie ist denn das bei Dir coding-mäßig geregelt (Einlesen der TEXT usw.)...

Wäre cool, wenn Du mir das mal darstellen könntest...

Viele Grüße
golop