Citat:
Ursprungligen postat av Anders Larsson
Men allvarligt, om det är så du vill få igång en diskussion, när jag kommer med relevanta frågor kring ämnet i tråden - och dessutom efter att tidigare ha fått idel beröm när jag stod emot grupptrycket här inne, så är det ditt svar?
Menar du på fulla allvar att du slösat bort min tid för att svara när och om du känner för det?
Om så är fallet rekommenderar jag omedelbart en moderator att radera eller åtminstone låsa denna tråd - för i så fall är du inte mer än ett patetiskt troll.
Menade du istället att "Jag svarar på hans frågor i ämnet som vi diskuterar här i tråden när jag har bättre tid" uttryckte du dig väldigt klumpigt.
I ännu ett försök att få tillbaks tråden till ämnet upprepar jag mina frågor:
Hur väljer IA ut vilka sajter som ska "indexeras/kopieras"?
Respekterar de en begäran om att exkluderas i efterhand?
Respekterar de robots.txt?
|
Från deras FAQ
Citat:
Q: Do You consider robots.txt file?
A: Yes. If some directories will be forbidden - we will not index them. Or if indexing will be forbidden at all - then also we will not index site.
Q: Do you archive all sites, files?
A: No. We consider robots.txt files. If there are forbidden content - we do not archive. Also we do not archive large files. And do not index sites with illegal content (by our opinion). Or, if found by our system illegal content later - than remove that.
Q: What is inArchive.com bot name?
A: Bot name is as site name: "inarchive.com"
|
Så de
verkar ju respektera robots.txt. Men har inte testat själv.