Soubor robots.txt je uložen v kořenovém adresáři webu. Např.: www.optimal-marketing.cz/robots.txt
Ukázky souboru robots.txt
User-agent: * Disallow:
Výchozí nastavení souboru robots.txt, ve kterém je povolen přístup všem robotům do celého webu.
User-agent: Googlebot Disallow: User-agent: Seznambot Disallow: /img/
Tento zápis říká, že robot Goolebot může přistupovat do celého webu a robot Seznambot nemůže přistupovat do adresáře img.