[Erik Stenman]

Om du crawlar sidorna för ofta lär det upptäckas och det kan ofta ta mycket kraft om du tar mycket information. Kan i värsta fall leda till att de blockar din ip.