Hej!
På en kunds sida har jag en robots.txt på servern och den är placerad i rotern.
Fast att jag har denna så går Google in i de mappar som jag inte vill att Google ska göra.
Det är främst i mappen
/external/ som den går in i, än så länge....
Är det någon annan som har varit med om detta innan?
Min Robots.txt ser ut enligt följande:
Kod:
User-agent: *
Disallow: /external/
Disallow: /media/ajaxtabs/
Disallow: /media/css/
Disallow: /media/img/
Disallow: /media/js/
Jonas