[xpat]

Du behöver bara använda den om du vill hindra en spindel att indexera en sida eller att följa länkarna på en sida.

Om du inte använde rden så talar du om för spindlar att du vill att sidan skall indexeras och att de skall följa alla länkar på den.

Och det är till 100% korrekt.