Kom ihåg mig?

Vad är det med MSNbot och alla konstiga URLer?

Ämnesverktyg Visningsalternativ
Oläst 2021-08-11, 21:19 #1
njoy njoy är inte uppkopplad
Medlem
 
Reg.datum: Feb 2007
Inlägg: 98
njoy njoy är inte uppkopplad
Medlem
 
Reg.datum: Feb 2007
Inlägg: 98
Red flag Vad är det med MSNbot och alla konstiga URLer?

Hej, jag har 404 spårning och undrar vad det är med MSNbot och alla konstiga URLer den får för sig att begära. Alla mina sajter är berörda och alla mina kunder har också dessa förekomster. Det är vilt slumpade konstigheter t.ex. bilreservdelar, restaurangmenyer, o.dyl.

Det är länkar som aldrig funnits på domänerna, och nej ingen webbplats är infekterad med malware.

Så här kan det se ut:

GET /bojangles-reidsville-2-online-menu/
msnbot-207-46-13-183.search.msn.com
Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingb...

Andra URLer såsom:

/come-funziona-volleyplayers
/hardees-restaurant-reidsville-online-menu/
/taco-bell-reidsville-2-online-menu/
/societa-beach/cerca
/volley-mercato

Har ni andra också sett det här beteendet hos MSNbot? Vad beror det på?

Jag har försökt tackla dessa med att svara med HTTP 410 Gone.
njoy är inte uppkopplad   Svara med citatSvara med citat
Oläst 2021-08-18, 23:16 #2
niklas_SWEDs avatar
niklas_SWED niklas_SWED är inte uppkopplad
Flitig postare
 
Reg.datum: Jan 2011
Inlägg: 380
niklas_SWED niklas_SWED är inte uppkopplad
Flitig postare
niklas_SWEDs avatar
 
Reg.datum: Jan 2011
Inlägg: 380
Här kan du läsa lite om det,

- https://perishablepress.com/weird-40...gine-requests/
- https://serverfault.com/questions/60...rors-every-day
niklas_SWED är inte uppkopplad   Svara med citatSvara med citat
Oläst 2021-08-19, 00:04 #3
njoy njoy är inte uppkopplad
Medlem
 
Reg.datum: Feb 2007
Inlägg: 98
njoy njoy är inte uppkopplad
Medlem
 
Reg.datum: Feb 2007
Inlägg: 98
Tack, jag har redan varit i kontakt med Jeff Starr. Han vet fortfarande inte vad som orsakar det. Men för honom har det avtagit.

Din stackexchange länk nämner återanvända domäner och ip adresser. Detta är HTTP anrop till en namngiven domän (Host headern). Där domänen som anges inte har bytt ägare på 15 år. Det känns inte som om det är orsaken för då skulle Bing behöva göra en DNS lookup på ett IP förutsatt att domänen använder dedikerad ip adress. Några av webbplatserna har inte dedikerad IP.

Senast redigerad av njoy den 2021-08-19 klockan 00:14
njoy är inte uppkopplad   Svara med citatSvara med citat
Oläst 2021-08-19, 11:39 #4
Kackalorum Kackalorum är inte uppkopplad
Medlem
 
Reg.datum: Aug 2018
Inlägg: 155
Kackalorum Kackalorum är inte uppkopplad
Medlem
 
Reg.datum: Aug 2018
Inlägg: 155
Äsch, tänkte fel, edit
Kackalorum är inte uppkopplad   Svara med citatSvara med citat
Svara


Aktiva användare som för närvarande tittar på det här ämnet: 1 (0 medlemmar och 1 gäster)
 
Ämnesverktyg
Visningsalternativ

Regler för att posta
Du får inte posta nya ämnen
Du får inte posta svar
Du får inte posta bifogade filer
Du får inte redigera dina inlägg

BB-kod är
Smilies är
[IMG]-kod är
HTML-kod är av

Forumhopp


Alla tider är GMT +2. Klockan är nu 18:36.

Programvara från: vBulletin® Version 3.8.2
Copyright ©2000 - 2021, Jelsoft Enterprises Ltd.
Svensk översättning av: Anders Pettersson
 
Copyright © 2017