WN

WN (https://www.wn.se/forum/index.php)
-   Allmänt (https://www.wn.se/forum/forumdisplay.php?f=2)
-   -   MSNBot (https://www.wn.se/forum/showthread.php?t=8306)

Jonas 2005-06-04 05:31

(Någon moderator får flytta inlägget om det är felplacerat. Tänk på klockan :) )

access_log
Kod:

207.46.98.58 - - [04/Jun/2005:05:02:37 +0200] "GET /_img/bak/?C=N;O=A HTTP/1.0" 200 1158 "-" "msnbot/1.0 (+http://search.msn.com/msnbot.htm)"
robots.txt
Kod:

User-agent: *
Disallow: /_img/

Nu till frågan, är det bara jag eller följer inte MSNBot restriktionerna som finns i robots.txt ???

Thomas 2005-06-04 05:50

När skapade du filen, man får räkna med ett besök eller två!?

Ser du nån

Kod:

207.46.98.58 - - [04/Jun/2005:0x:xx:xx +0200] "GET /robots.txt" 200 1158 "-" "msnbot/1.0 (+http://search.msn.com/msnbot.htm)"
i loggen?

Thomas

Jonas 2005-06-04 05:51

Citat:

Originally posted by Thomas@Jun 4 2005, 04:50
När skapade du filen?
Thomas

Den skapade jag före jag skapade index.php filen.
Så den har legat där sedan jag slängde upp siten

Och det är väl mer än 2år sedan nu

Thomas 2005-06-04 05:53

Citat:

Ursprungligen postat av Jonas
Citat:

Ursprungligen postat av Thomas
När skapade du filen?
Thomas


Den skapade jag före jag skapade index.php filen.
Så den har legat där sedan jag slängde upp siten

Och det var i förhållande till besöket?

Thomas

Jonas 2005-06-04 05:54

Citat:

Originally posted by Thomas@Jun 4 2005, 04:53
Och det var i förhållande till besöket?

Thomas

Glömde skriva tidpunkt.

Som ovan. Snart 2år sedan

Thomas 2005-06-04 05:57

Citat:

Ursprungligen postat av Jonas
Citat:

Ursprungligen postat av Thomas
Och det var i förhållande till besöket?

Thomas

Glömde skriva tidpunkt.

Som ovan. Snart 2år sedan

Den reviderades senaste gången för 2 år sedan och

Citat:

User-agent: *
Disallow: /_img/

var med då?

MSNbot brukar vara felfri så jag är lika förvånad som du, där av tjatet om tidpunkt.

Thomas

Jonas 2005-06-04 06:07

Citat:

Originally posted by Thomas@Jun 4 2005, 04:57
var med då?

MSNbot brukar vara felfri så jag är lika förvånad som du, där av tjatet om tidpunkt.

Thomas

Menar du "vad med?"

Kod:

User-agent: *
Disallow: /gallery/
Disallow: /_img/
Disallow: /lib/
Disallow: /dev/
Disallow: /public/

Det är hela filen...


Alla tider är GMT +2. Klockan är nu 13:27.

Programvara från: vBulletin® Version 3.8.2
Copyright ©2000 - 2025, Jelsoft Enterprises Ltd.
Svensk översättning av: Anders Pettersson