Průvodce

Jak nastavit robots.txt pro AI agenty

AI asistenti jako ChatGPT, Claude nebo Perplexity používají vlastní boty (GPTBot, ClaudeBot, PerplexityBot) ke čtení webů. Pokud je váš robots.txt blokuje, asistenti váš obchod nevidí a nemohou ho doporučovat zákazníkům.

Které boty zkontrolovat

Otevřete robots.txt na vašem webu (např. vasadomena.cz/robots.txt). Hledejte bloky User-agent pro tato jména: GPTBot, ChatGPT-User, ClaudeBot, claude-web, PerplexityBot, Google-Extended, Amazonbot, Applebot-Extended. Pokud za nimi následuje Disallow: /, bot je kompletně zablokován.

Jak odblokovat AI boty

Odstraňte nebo zakomentujte řádky Disallow: / pro každého AI bota. Pokud chcete blokovat jen některé části webu (např. administraci), ponechte Disallow jen pro konkrétní cesty:

User-agent: GPTBot
Disallow: /admin/
Disallow: /checkout/

User-agent: ClaudeBot
Disallow: /admin/
Disallow: /checkout/

Po uložení zkontrolujte web znovu na idealbusiness.ai.

Shoptet

V administraci Shoptetu jděte do Nastavení → SEO → robots.txt. V editoru najděte pravidla pro GPTBot, ClaudeBot a další AI boty a odstraňte řádky Disallow: /. Shoptet přidává některé bloky automaticky — po uložení ověřte, že se neobnovily.

Shopify

Shopify od června 2024 AI boty neblokuje. Pokud máte starší úpravy přes robots.txt.liquid, zkontrolujte je: Online Store → Themes → Edit code → Templates. Odstraňte Disallow pravidla pro GPTBot a ClaudeBot.

WooCommerce a WordPress

WordPress generuje robots.txt virtuálně. Nainstalujte Yoast SEO nebo Rank Math, v nastavení najděte sekci robots.txt a odstraňte pravidla blokující AI boty. Pokud žádné nemáte, zkontrolujte, zda na serveru neexistuje fyzický soubor robots.txt.

Zkontrolujte svůj web — zjistěte, co AI asistenti vidí na vašich stránkách.