[Gorm]

Hej

Jag har ett riktigt jobbigt problem. Jag driver ett forum i phpbb plus (http://www.arkeologiforum.se). Googlebot tuggar i sig mycket mer bandbredd än de fysiska besökarna (ca 5 gånger mer) vilket innenurit att jag snart är uppe i min månadskvot. Just nu har jag ändrat så att man måste vara inloggad för att kunna läsa men det håller inte i längden eftersom jag vill att inläggen skall vara sökbara i t ex google. Det är endast google som tar bandbredd, andra sökrobotar beter sig mer "normalt".

Tacksam för all hjälp jag kan få!

/Johan

[hnn]

Skapa en dynamisk robots.txt med .htaccess tex...

och blocka google med jämna mellanrum

[pitbull]

Löste detta på ett simpelt sätt på ett annat forum som jag hade. (samma problem)

Jag reggade ett konto som admin och la ut inloggningsuppgifterna på forumets framsida med en liten text: Vill du kika in på forumet utan att behöva registrera dig? Använd... [användarnamn], [lösenord].

Väldigt amatörmässigt, men en snabb och enkel lösning som fungerade i alla fall...

/S

[Jocke]

Det är väll bara i början när google ska indexera hela sidan som det drar iväg.

Villken sida är det du pratar om? är det http://www.arkeologiforum.se?
Hur mycket besökare har du?

[Gorm]

Ursprungligen postat av hnn

Skapa en dynamisk robots.txt med .htaccess tex...

Förklara gärna lite mer utförligt.

Ursprungligen postat av Jocke

Det är väll bara i början när google ska indexera hela sidan som det drar iväg.
Villken sida är det du pratar om? är det http://www.arkeologiforum.se?
Hur mycket besökare har du?

Exakt, arkeologiforum.se. Sidan har existerat i 2 år och det är endast under senaste månaderna som det dragit iväg. Sidan har ca 200 besökare varje dag i nuläget.

/Johan

[hnn]

Ursprungligen postat av Gorm

Förklara gärna lite mer utförligt.

Gärna... Gör en statisk rewrite till robots.txt, som du pekar mot ett serverside script (tex. robots.php) som du låter känna av loggar eller nått....

RewriteRule ^robots.txt$ robots.php [NE,L]

[magic]

<meta name="revisit-after" content="3 days">

talar om hur ofta google skall indexera din site.
sätt till 7 dagar. 14 dagar beroende på hur ofta sidorna skall indexeras.

[Starweb]

Originally posted by magic@Mar 27 2006, 09:31

<meta name="revisit-after" content="3 days">

talar om hur ofta google skall indexera din site.
sätt till 7 dagar. 14 dagar beroende på hur ofta sidorna skall indexeras.

Fungerar verkligen den meta-taggen längre? Trodde den var utdaterad för flera år sedan...?

Någon annan som vet med säkerhet vad som gäller?

[hnn]

Originally posted by Starweb@Mar 27 2006, 13:57

Fungerar verkligen den meta-taggen längre? Trodde den var utdaterad för flera år sedan...?
Någon annan som vet med säkerhet vad som gäller?

På Webmaster World så sägs det att den fungerar iaf... =)

[Starweb]

Jo, men titta på datumet när inlägget på Webmaster World gjordes:
"3:33 am on July 13, 2004"