Har WN som tidsfördriv
|
|
Reg.datum: May 2007
Inlägg: 1 014
|
|
Har WN som tidsfördriv
Reg.datum: May 2007
Inlägg: 1 014
|
Undrar lite över hurvida sökmotorer reagerar om jag vill stoppa dem söka igenom vissa mappar.
Jag har sidan index.php där igentligen allting körs... andra sidor hämtas genom get, alltså så ser en typisk länk ut så här
index.php?kontakta
Sen kontrollerar jag alla get som kommer till index och inkluderar rätt fil.. Dessa filer ligger i andra mappar och det är dem jag vill skydda från sökmotorerna att hitta.. men iom att det ligger robot.txt filer i dessa mappar som ska stoppa spindlar söka igenom dem, kommer spindlar fortfarande följa länken och hämta filen och dess innehåll? Eller kommer dom ignorera länken?
Jag vill ju att spindlar ska hitta allting, men filerna i sig självt är oanvändbara om dem inte körs via index.php... alltså om dem körs separat direkt i webbläsaren får man felmeddelande.
|