User-agent: * Allow: / # Bloquear rutas que no deben indexarse # /user/ son las páginas de cuenta reales (alerts, favorites, plans, profile, # thanks). Antes aquí solo estaba /account/, que nunca existió como ruta: la # regla protegía una URL fantasma mientras /user/* quedaba abierto a crawl. Disallow: /api/ Disallow: /auth/ Disallow: /user/ Disallow: /admin/ Disallow: /_next/ Disallow: /404 Disallow: /500 # Permitir explícitamente contenido público Allow: /videos/ Allow: /mananeras/ Allow: /tema/ Allow: /temas Allow: /estenografica Allow: /mananera-de-hoy Allow: /debatepedia Allow: /topsearches Allow: /como-funciona Allow: /amlopedia Allow: /llms.txt Allow: /terms Allow: /pricing # Crawl delay para ser amigable con el servidor Crawl-delay: 1 # --------------------------------------------------------------------------- # Crawlers de IA / answer engines: PERMITIDOS explícitamente. # Un grupo con User-agent propio ignora por completo el grupo "*", así que aquí # se repiten las mismas reglas: acceso libre al contenido público y fuera las # rutas privadas o de sesión. Ninguna línea bloquea contenido indexable. # Ficha del sitio para modelos: https://mananeradehoy.com/llms.txt # --------------------------------------------------------------------------- User-agent: GPTBot User-agent: OAI-SearchBot User-agent: ChatGPT-User User-agent: ClaudeBot User-agent: Claude-User User-agent: Claude-SearchBot User-agent: anthropic-ai User-agent: PerplexityBot User-agent: Perplexity-User User-agent: Google-Extended User-agent: Applebot-Extended User-agent: Bingbot User-agent: CCBot User-agent: Amazonbot User-agent: Meta-ExternalAgent User-agent: cohere-ai Allow: / Allow: /videos/ Allow: /mananeras/ Allow: /tema/ Allow: /temas Allow: /estenografica Allow: /mananera-de-hoy Allow: /mananera-en-vivo Allow: /a-que-hora-es-la-mananera Allow: /debatepedia Allow: /topsearches Allow: /como-funciona Allow: /amlopedia Allow: /llms.txt Allow: /terms Allow: /pricing Disallow: /api/ Disallow: /auth/ Disallow: /user/ Disallow: /admin/ Disallow: /_next/ Disallow: /404 Disallow: /500 Sitemap: https://mananeradehoy.com/sitemap.xml