Hej, jag har 404 spårning och undrar vad det är med MSNbot och alla konstiga URLer den får för sig att begära. Alla mina sajter är berörda och alla mina kunder har också dessa förekomster. Det är vilt slumpade konstigheter t.ex. bilreservdelar, restaurangmenyer, o.dyl.
Det är länkar som aldrig funnits på domänerna, och nej ingen webbplats är infekterad med malware.
Så här kan det se ut:
GET /bojangles-reidsville-2-online-menu/
msnbot-207-46-13-183.search.msn.com
Mozilla/5.0 (compatible; bingbot/2.0; +
http://www.bing.com/bingb...
Andra URLer såsom:
/come-funziona-volleyplayers
/hardees-restaurant-reidsville-online-menu/
/taco-bell-reidsville-2-online-menu/
/societa-beach/cerca
/volley-mercato
Har ni andra också sett det här beteendet hos MSNbot? Vad beror det på?
Jag har försökt tackla dessa med att svara med HTTP 410 Gone.