Citat:
Originally posted by ztream@Apr 12 2005, 15:43
Jag anser att allaannonser har exakt samma rätt som google att indexera blockets innehåll. Robots.txt är enkel att använda.
|
Blockets robots.txt förbjuder indexering från andra sökmotorer än Google och AltaVista.
Alltså tillåter Blocket medvetet Google, men inte tillåter INTE bl.a. Allaannonser!