Textový soubor v kořeni webu (/robots.txt), který robotům říká, kam smějí a kam ne. Příkaz Disallow: / zakáže robotům celý web. Obsahuje také odkaz na mapu webu.
Soubor je jen doporučení, nezabezpečuje obsah. Citlivé věci chraňte heslem, ne souborem robots.txt.