# ═══════════════════════════════════════════════════════════════════════════════
# robots.txt - agenciageo.mx
# Optimizado para SEO tradicional y GEO (Generative Engine Optimization)
# Última actualización: 2026-01-05
# ═══════════════════════════════════════════════════════════════════════════════

# ─────────────────────────────────────────────────────────────────────────────────
# CRAWLERS DE BÚSQUEDA TRADICIONAL
# ─────────────────────────────────────────────────────────────────────────────────

User-agent: Googlebot
Allow: /
Crawl-delay: 1

User-agent: Bingbot
Allow: /
Crawl-delay: 1

User-agent: Slurp
Allow: /

User-agent: DuckDuckBot
Allow: /

User-agent: Baiduspider
Allow: /

User-agent: YandexBot
Allow: /

# ─────────────────────────────────────────────────────────────────────────────────
# CRAWLERS DE IA GENERATIVA - PERMITIDOS Y BIENVENIDOS
# Agencia GEO practica lo que predica: acceso total para LLMs
# ─────────────────────────────────────────────────────────────────────────────────

# OpenAI / ChatGPT
User-agent: GPTBot
Allow: /

User-agent: ChatGPT-User
Allow: /

# Anthropic / Claude
User-agent: ClaudeBot
Allow: /

User-agent: anthropic-ai
Allow: /

User-agent: Claude-Web
Allow: /

# Perplexity
User-agent: PerplexityBot
Allow: /

# Google AI / Gemini / SGE
User-agent: Google-Extended
Allow: /

# Cohere
User-agent: cohere-ai
Allow: /

# Meta AI
User-agent: FacebookBot
Allow: /

User-agent: meta-externalagent
Allow: /

# Apple Intelligence
User-agent: Applebot
Allow: /

User-agent: Applebot-Extended
Allow: /

# Microsoft Copilot / Bing AI (ya declarado arriba)

# Common Crawl (usado para entrenamiento)
User-agent: CCBot
Allow: /

# Amazon / Alexa
User-agent: Amazonbot
Allow: /

# Otros bots de IA
User-agent: YouBot
Allow: /

User-agent: Bytespider
Allow: /

# ─────────────────────────────────────────────────────────────────────────────────
# REGLA GENERAL - PERMITIR TODO
# ─────────────────────────────────────────────────────────────────────────────────

User-agent: *
Allow: /

# ─────────────────────────────────────────────────────────────────────────────────
# RECURSOS ESPECIALES PARA IA
# ─────────────────────────────────────────────────────────────────────────────────

# Archivo de instrucciones para LLMs
# Contiene información estructurada sobre el sitio, servicios y contenido
# Formato: https://llmstxt.org/

# ─────────────────────────────────────────────────────────────────────────────────
# SITEMAPS
# ─────────────────────────────────────────────────────────────────────────────────

Sitemap: https://agenciageo.mx/sitemap.xml

# ─────────────────────────────────────────────────────────────────────────────────
# INFORMACIÓN DEL SITIO
# ─────────────────────────────────────────────────────────────────────────────────
# 
# Agencia GEO - Primera agencia de Generative Engine Optimization en LATAM
# 33 sitios web posicionados en primera página de Google
# 12+ años de experiencia en SEO
# 
# Servicios:
# - Auditoría GEO: $9,900 MXN
# - Implementación Método CITA: $29,900 MXN/mes
# - Consultoría GEO: $14,900 MXN/mes
# 
# Archivo llms.txt: https://agenciageo.mx/llms.txt
# Contacto: hola@agenciageo.mx
# 
# ═══════════════════════════════════════════════════════════════════════════════