[htiawe]

Om du har lagt till en eller flera siter i Yahoo!s Site Explorer så se till att ha din y_key.html-fil tillgänglig när Yahoo! önskar. Jag lade till några siter för någon månad sedan och laddade upp .html-filen, därefter glömde jag helt bort Site Explorer.

Tills förra helgen då jag noterade att jag använt massor av bandbredd på mitt Binero-konto. Jag hade använt 13GB bandbredd på två dagar. Min första instinkt var att jag blivit hackad och att någon använt mig som dump. Men efter en kontroll av kontot och loggfiler så visade det sig att Yahoo! än en gång ville kontrollera att siterna fortfarande kunde bekräftas via .html-filen.

Saken är den att jag inte tycker om att ha en massa filer som inte har någon mening och inte visste jag att man var tvungen att ha kvar .html-filen. Yahoo! hade försökt hämta filen så många gånger under de två dygnen att Firefox låste sig när jag försökte kolla loggen. Så ett tips till er som lagt till siterna i Site Explorer, se till att ha kvar .html-filen eller ta bort siterna, såvida ni inte har obegränsad bandbredd.

[hnn]

Finns inget som heter "obegränsad bandbredd"....

[StefanBergfeldt]

Men det finns leverantörer som inte tar betalt för bandbredden.

[Alpha]

Originally posted by StefanBergfeldt@Dec 13 2007, 11:11
Men det finns leverantörer som inte tar betalt för bandbredden.

Det finns leverantörer som levererar gratis mat också, http://www.redcross.se/

[victor-]

Jah, då ska vi räkna lite.

Låt oss säga att en 404 tar ~4 kB(om vi räknar allt, hela ethernet-paket och åt båda hållen), vilket kan vara lite i överkant, beror lite på hur 404-sidan ser ut också. Jag testade mot en annan sida som hosteades hos Binero, och då var det ~2.7 kB, men dom räknar nog bara utgående egentlig data, vilket isf. skulle göra det ännu mindre.

Men dags att räkna lite då:
13 GB är 13,000,000 kB
13,000,000 delat i 4 kB per request är 3250000 requests.

På två dagar går det 2 * 24 * 60 * 60 = 172800 sekunder.

Så 3250000 requests på 172800 sekunder innebär att frekvensen vore(avrundat):
18.81 requests/sekund.

Vi kan ju vara snälla och anta att han faktiskt hade annan trafik också, men även om det bara hade varit 1 GB som var Yahoo, så skulle det innebära ~1.45 requests per sekund från dom.


Jag tänker inte säga att htiawe har fel, men jag tycker att chansen att Yahoo har skickat mer än en request/sekund till honom för att verifiera att den filen verkligen finns där är mindre än chansen att vinna storvinsten på lotto fem gånger i rad.

[htiawe]

Med tanke på att jag drar i snitt 2GB trafik per månad så är det inte så mycket annan trafik som kan bidra, jag hostar inga stora filer. Dessutom bestod loggen av förfrågningar efter endast den filen.

Grejjen är den att det inte är en vanlig vit 404 som visas när sidan inte finns, tanken är ju att besökaren träffar på en 404 när de navigerar sidan så allting laddas ju som vanligt med menyer och allting, förutom att content-delen visar 404-meddelandet. Så Yahoo! laddade hela min sida gång på gång, i princip.

[victor-]

Okej, sorry då. Är det pixeldave.se du snackar om? För där är 404-svaret ~22 kB stort.

Så då räknar vi igen, 11 GB(drog bort 2 GB, även om det handlade om endast två dagar och inte en hel månad) på två dagar, 22 kB per request.. 500000 requests blir det.. i en frekvens alá 2.89 requests/sekund. Yahoo kommer för övrigt inte att ladda ner bilder och content, dom kommer nöja sig med texten som sidan visar, fast är dom smarta och bandbreddsoptimala så lär dom bryta TCP-kopplingen redan innan där när dom märker att dom får en 404a.

[htiawe]

Tja, du får gärna komma med en bättre förklaring om du vill. Loggarna var ganska entydiga.
Att det hela slutade när jag tog bort siterna talade också sitt tydliga språk.

[Adam]

Du borde nästan kunna sätta dit Yahoo! för att de gjort en DoS-attack mot din server. Om det du säger nu verkligen stämmer måste det ha inträffat något grymt fel hos Yahoo!. Mitt tips är att göra de uppmärksamma på detta.

MVH

[rv_]

jag att det snarare är htiawe som har fel än Yahoo som ddosar