Visa ett inlägg
Oläst 2005-12-02, 23:51 #5
PgDs avatar
PgD PgD är inte uppkopplad
Medlem
 
Reg.datum: Dec 2005
Inlägg: 164
PgD PgD är inte uppkopplad
Medlem
PgDs avatar
 
Reg.datum: Dec 2005
Inlägg: 164
Var hälsade wäbbmästare!

Jag har haft den här lille gynnaren under uppsikt ett tag, och har en teori. Jag har anledning att misstänka att, håll i er nu, det är en googlebotbulvan. Innan någon kastar sig över tangentbordet för att skriva något om hur dum jag är (behövs inte, det vet jag redan) så låt mig berätta mer.

På en av mina sajter har jag några arkivsidor som aldrig har lästs av någon krälare, allra minst googlebot. De är dessutom med i robots.txt som no-no. Icke desto mindre har dessa sidor blivit indexerade av G. Eftersom jag är sådan att jag inte kan acceptera det omöjliga ens när jag ser det, så började jag forska i loggen, och fann att en av sidorna hade lästs en enda gång av, gissa vem, jo vår vän 81.224.189.250.

Av alla spår att döma så är det en robot av något slag. UA-strängen ser visserligen ut som en legitim Svenssonsurfare, men där stannar likheterna. Den läser inte bilder. Den läser inte css-filer. Den läser inte js-filer. Det enda som inte liknar ett robotbetende är att den inte heller läser robots.txt (och således inte heller bryr sig om vad det står i den).

Jag har anmält den till abuse på Telia, och fick, som väntat, till svar att det inte var något de skulle undersöka eller ens brydde sig om. Fast kanske inte med de orden. Jag fick en konstig känsla av att de mycket väl visste vad det rörde sig om, men det har jag förstås inga belägg för.

Någon med flera hjärnceller än jag kanske kan komma på hur en fil som aldrig lästs av googlebot ändå kan indexeras av G. Vad kan jag ha förbisett? Rent teoretiskt kan det naturligvis hända att loggningen var sönder just den dagen gogglebot var där, men jag har inte hittat några onormala luckor. Något annat?
PgD är inte uppkopplad   Svara med citatSvara med citat