[Processdesign]

Helt klart, kommentarer är alltid ett bra sätt.

Läste just att man kan skapa en fil och lägga upp i rotmappen, som man kallar robots.txt som innehålleR nåt i stil med:

User-agent: WebCopier
Disallow: /
User-agent: Teleport
Disallow: /
User-agent: TeleportPro
Disallow: /

och att det skall neka tillgång och kopiering, det funkar dock inte nu när jag provade =(