WN - Lista på spindlar

WN (https://www.wn.se/forum/index.php)

- Sökmotorpositionering (https://www.wn.se/forum/forumdisplay.php?f=11)

- - Lista på spindlar (https://www.wn.se/forum/showthread.php?t=11444)

Thomsson

2005-12-21 12:19

Hejsan!

Godjul i förskott!

Tänkte höra om ni vet någon lista på sökspindlar/Robotar på nätet? så att man kan se till vilken sökmotor som spindeln hör till?

Ha de fint!

ViktorPersson

2005-12-21 12:39

Här är en rätt utförlig lista:
http://www.jafsoft.com/searchengines...ots_and_others

Nikke Lindqvist

2005-12-21 15:12

I robots.txt-filen på Searchengineworld kan man hitta en väldigt lång lista över sökspindlar som Brett inte godvilligt släpper in på sin sajt:

http://www.searchengineworld.com/robots.txt

Det är väl ungefär bara Google-bot som får vara där vad jag kan förstå...

Nikke Lindqvist

2005-12-21 15:15

Ha-ha! Även robots.txt-filen här på WN verkar vara inspirerad av Bretts fil:

Citat:

User-agent: WebmasterWorld Extractor
Disallow: /

Nikke Lindqvist

2005-12-22 22:59

Tack Fulton! Vilken otroligt imponerande lista.

Alla tider är GMT +2. Klockan är nu 10:38.