Guía

Cómo configurar robots.txt para agentes de IA

Los asistentes de IA como ChatGPT, Claude y Perplexity usan sus propios bots (GPTBot, ClaudeBot, PerplexityBot) para leer sitios web. Si su robots.txt los bloquea, los asistentes no pueden ver su tienda ni recomendarla.

Qué bots comprobar

Abra robots.txt en su sitio web (p. ej. sudominio.com/robots.txt). Busque bloques User-agent con estos nombres: GPTBot, ChatGPT-User, ClaudeBot, claude-web, PerplexityBot, Google-Extended, Amazonbot, Applebot-Extended. Si les sigue Disallow: /, el bot está completamente bloqueado.

Cómo desbloquear bots de IA

Elimine o comente las líneas Disallow: / de cada bot de IA. Si quiere bloquear solo ciertas partes del sitio (p. ej. admin), deje Disallow solo para esas rutas:

User-agent: GPTBot
Disallow: /admin/
Disallow: /checkout/

User-agent: ClaudeBot
Disallow: /admin/
Disallow: /checkout/

Tras guardar, vuelva a comprobar su sitio en idealbusiness.ai.

Shoptet

En la administración de Shoptet, vaya a Configuración → SEO → robots.txt. Encuentre las reglas para GPTBot, ClaudeBot y otros bots de IA y elimine las líneas Disallow: /. Shoptet añade algunos bloqueos automáticamente — tras guardar, verifique que no hayan reaparecido.

Shopify

Desde junio de 2024, Shopify ya no bloquea bots de IA. Si tiene personalizaciones antiguas en robots.txt.liquid, compruébelas: Online Store → Themes → Edit code → Templates. Elimine las reglas Disallow para GPTBot y ClaudeBot.

WooCommerce y WordPress

WordPress genera robots.txt virtualmente. Instale Yoast SEO o Rank Math, busque la sección robots.txt en la configuración y elimine las reglas que bloquean bots de IA. Si no hay ninguna, compruebe si existe un archivo robots.txt físico en el servidor.

Compruebe su sitio web — descubra qué ven los asistentes de IA en sus páginas.