# robots.txt — Claro Perú | Conocimiento AI Ready
# Última actualización: 2025-10-31
# Optimizado para SEO tradicional y motores de respuesta (AEO / LLM / IA)

# ================================
# Acceso general — SEO tradicional
# ================================

User-agent: *
Allow: /
Disallow: /wps/
Disallow: /portal/pe/
Disallow: /portal/pe/recursos_portlets/
Disallow: /portal/pe/recursos_tema/
Disallow: /portal/pe/recursos_contenido/
Disallow: /api/
Disallow: /apps-react/
Disallow: /personas2/
Disallow: /personas-b/
Disallow: /conocimiento-ai/

Allow: */*favicon.*$
Allow: */icon-touch*.*$
Allow: /portal/pe/recursos_tema/assets/img/favicon.*$
Allow: /portal/pe/recursos_tema/assets/img/icon-touch*.*$

# ================================
# Permisos específicos para IA / LLM
# ================================

# Google SGE / Gemini
User-agent: Googlebot
Disallow: /conocimiento-ai/

# Google-Extended (IA training)
User-agent: Google-Extended
Allow: /conocimiento-ai/

# Bing Copilot / OpenAI (ChatGPT / GPT-5)
User-agent: GPTBot
Allow: /conocimiento-ai/
User-agent: Bingbot
Allow: /conocimiento-ai/

# Anthropic Claude
User-agent: ClaudeBot
Allow: /conocimiento-ai/

# Perplexity AI
User-agent: PerplexityBot
Allow: /conocimiento-ai/

# CommonCrawl (datasets para IA)
User-agent: CCBot
Allow: /conocimiento-ai/

# You.com / Neeva AI
User-agent: YouBot
Allow: /conocimiento-ai/

# ================================
# Sitemaps
# ================================

Sitemap: https://claro.com.pe/conocimiento-ai/sitemap-llms.xml
Sitemap: https://www.claro.com.pe/sitemap.xml