Nastavení robots.txt
Chcete-li spravovat nastavení robots.txt, přejděte do Konfigurace → Nastavení → Obecná nastavení (Configuration → Settings → General settings).
Tato stránka umožňuje konfiguraci pro více obchodů; to znamená, že stejná nastavení lze definovat pro všechny obchody, nebo se mohou lišit obchod od obchodu. Pokud chcete spravovat nastavení pro určitý obchod, zvolte jeho název z rozbalovacího seznamu konfigurace pro více obchodů a zaškrtněte vlevo všechna potřebná políčka, abyste pro ně mohli nastavit vlastní hodnoty. Další podrobnosti najdete v kapitole Více obchodů.
robots.txt
Soubor robots.txt sděluje crawlerům vyhledávačů, ke kterým URL na vašem webu mají přístup. Používá se hlavně k tomu, aby web nebyl přetížen požadavky; nejde o mechanismus, jak webovou stránku vyřadit z Googlu. Chcete-li webovou stránku z Googlu vyřadit, zablokujte indexování pomocí noindex nebo stránku chraňte heslem.
Nastavení robots.txt definujte takto:

- Povolit sitemap.xml (Allow sitemap.xml) - Zaškrtněte, chcete-li robotům povolit přístup k souboru sitemap.xml.
- Zakázané jazyky (Disallow languages) - Seznam jazyků, které se mají zakázat. Pokud nechcete robotům omezovat určité jazyky, ponechte toto pole prázdné.
- Zakázané cesty (Disallow paths) - Seznam cest, které se mají zakázat.
- Lokalizovatelné zakázané cesty (Localizable disallow paths) - Seznam lokalizovatelných cest, které se mají zakázat.
- Doplňková pravidla (Additions rules) - Zadejte doplňková pravidla pro soubor robots.txt. Pravidla jsou pokyny pro crawlery, které části webu mohou procházet. Úplný popis jednotlivých pravidel najdete na stránce o interpretaci specifikace robots.txt společností Google.
Poznámka
Data robots.txt můžete také rozšířit přidáním souboru robots.additions.txt do adresáře wwwroot svého webu.