# https://normatia.com/robots.txt # # ── Por qué hay tan pocos Disallow ────────────────────────────────────────── # `Disallow` bloquea el RASTREO, no la indexación. Una URL ya indexada que # pasa a estar bloqueada se queda en el índice ("Indexada aunque bloqueada por # robots.txt") para siempre, porque Google ya no puede volver a entrar a leer # el `noindex` que la sacaría. # # Ahora mismo casi todas las rutas de aplicación (/login/, /register/, # /es/area-usuario/, /es/recursos/embed/…) SÍ están indexadas. El orden # correcto es: # 1. Poner `noindex` en esas plantillas ← bloque B1 del plan, pendiente # 2. Esperar a que Google las rastree y las suelte # 3. Solo entonces añadir aquí su Disallow, para ahorrar rastreo # # Añadir el Disallow antes del paso 2 las dejaría congeladas en el índice. # Por eso aquí solo están las rutas que nunca fueron indexables. # # ── Rastreadores de IA ────────────────────────────────────────────────────── # NO se bloquean GPTBot, ClaudeBot, PerplexityBot, CCBot ni Google-Extended. # Ser la fuente citada en AI Overviews y en asistentes es un objetivo declarado # (KPI 2 de marketing/SEO/02-normatia-plan-accion.md). Si algún día se revisa # esta decisión, revísese también ese KPI. User-agent: * Allow: / # Vistas previas internas: ya llevan `noindex, nofollow` desde su origen y # nunca han estado en el sitemap, así que bloquearlas no congela nada. Disallow: /preview/ Sitemap: https://normatia.com/sitemap-index.xml