[Blomsterpassion]

Årets spindelhögtid Halloween är visserligen över, man jag har ett litet spindelmysterium som jag skulle behöva lite hjälp med att klura ut.

Jag undrar lite över google spindlarna. Har en mindre nystartad köp & sälj sida med ca 1000 annonser och hela webkontot är i nuläget på 456Mb.

Under hela oktober hade jag besök av 10 olika google-bootar. När jag såg att dom höll på att äta upp trafikkapaciteten på mitt webbhotellkonto gjorde jag olika åtgärder, bla. stänga ner bildmappen på 400Mb för sökning mm.

50Mb är sökbart och åtkomligt för spindlarna. Då förökade sig spindlarna sig istället...

Nu under första veckan i november har jag haft besök av 16 googlebootar som använt ca 8 Gb trafik:

Site Accesses Bytes
crawl-66-249-66-197.googlebot.com 17,679 900,851,864
crawl-66-249-66-194.googlebot.com 15,893 810,738,919
crawl-66-249-66-165.googlebot.com 14,951 761,648,999
crawl-66-249-66-162.googlebot.com 14,876 757,666,402
crawl-66-249-66-119.googlebot.com 11,117 699,090,517
crawl-66-249-66-116.googlebot.com 11,061 688,317,359
crawl-66-249-66-66.googlebot.com 10,46 632,648,688
crawl-66-249-66-69.googlebot.com 10,223 617,748,213
crawl-66-249-66-98.googlebot.com 8,429 426,930,771
crawl-66-249-66-23.googlebot.com 8,254 417,404,272
crawl-66-249-66-20.googlebot.com 7,838 395,964,679
crawl-66-249-66-101.googlebot.com 7,804 394,563,569
crawl-66-249-66-133.googlebot.com 4,593 231,902,419
crawl-66-249-66-130.googlebot.com 4,585 231,925,952
crawl-66-249-66-78.googlebot.com 4,497 227,390,779
crawl-66-249-66-75.googlebot.com 4,473 225,691,629
totalt: 47,319accesser 8,420,485,031 bytes


Visst är det trevligt att få sin sida välbesökt och välindexerad av google, men känner mig just lite smått invaderad av spindlar.

Är det normalt att spindlarna tuggar i sig 8 Gb trafik på en vecka, på en sida av min storlek?

Hoppas på ledtrådar och lite hjälp.