Såg i mina loggar att Mediapartners-Google/2.1 (+http://www.googlebot.com/bot.html) brukar vara på besök på sistonde och i första hand laddar den ner alla flash filer på sidan...har hämtat robot.txt ett antal gånger och en (1) gång har den hämtat en php-sida...

Vad gör den? vanliga googlebot är också på besök men denna verkar bara vara ute efter flash?

Någon som vet vad den gör?

Fick besök av den lille krabaten för första gången idag. Då laddade den endast ner html-filer. Verkar som om den är ute efter bilderna på min site för den hämtade i första hand hem sidor med många img-taggar i.

Hur vet den att det finns img-taggar i ett dokument utan att hämta hem det?

Froogle eller targetted ads (t ex de som visas i Opera) är mina två _gissningar_.

Den laddar endast ner HTML-filer. Inga bilder alltså. Om jag såg rätt i loggen så var det endast sidor med många bilder på den var intresserad av.

kanske utryckte mig dåligt men när den var inne på freshgames.net så var det bara flash spelen den ladda ner och ingenting annat! så det verkar vara olika för olika...

Det låter väl lite slumpmässigt? Den kan väl inte veta om det finns många bilder i ett HTML-dokument innan den laddat ner och kollat?

den kan ju använda sig av googles vanliga cache för att se vad för bilder o flashfiler den skall ladda ner...

men eftersom den bara ladda ner html från kullervo så verkar det ju inte vara så heller...

Som gabriel spekulerade så verkar det som om den visste innehållet på siten innan den gjorde första besöket.

De två absolut första träffarna från "Mediapartners-Google/2.1 (+http://www.googlebot.com/bot.html)" såg ut såhär:
GET /robots.txt
GET /alb_show_id46.html

Nu när jag spanar närmare i loggen ser jag ju att Mediapartners gjort hundratals träffar men webalizer hittar bara 14... skumt.

Har Google en separat spindel för bildsöken eller är det nåt okänt? *spännande* :blink:

Om du har adsense kollar den din sida och anpassar reklamen efter innehållet.


######## Uppdaterad eftersom intresset var stort. #######

Ponera att Kalle surfar in på WN och skriver ett inlägg om jordgubbssaft, då finns det därmed en helt ny internetsidan som handlar om detta ämne, på sidan finns det reklam som Google levererar (Adwords/Adsense), När Jeppe sedan klickar på länken till Kalles inlägg på WN laddas sidan och Google skall leverera passande reklam, då sidan är helt ny och google inte har en aning om vad den handlar om (inte indexerad) så skickar Google ut Mediapartner boten, den scannar sidan i ett nafs, indexerar den och ser att den handlar om jordgubbssaft, detta på några millisekunder så när Jeppe's banners är laddade så är det jordgubbssaft reklamen handlar om, om någon har köpt just detta ord.

Google använder alltså denna metod att scanna sidor som inte tidigare är kända för google för att ta reda på vad sidan handlar om så passande reklam visas.

#########################################

Thomas

En icke indexerad sida kan alltså använda sig av Adsence för att snabbare indexeras?

Tyvärr verkar dessa botar helt fristående från varandra :/ Det mediapartner hämtar verkar inte ens bli underlag nästa indexering.

Thomas