[Seattlegrunge]

Ah... Kjette, tjusigt! Den kan vara något att använda... thx

Pitbull: Den kan man också köra med ja... schysst! Men grejen är den att frågan är om robots.txt används om spindeln utger sig för att vara vanlig besökare... och dessutom skulle man väl kunna bygga en spindel som så att den skiter i att kolla robots.txt?