Comprobador de acceso de bots de IA

¿Por qué importa?

Asistentes como ChatGPT, Claude y Perplexity leen la web con sus propios rastreadores al responder. Si tu robots.txt bloquea esos rastreadores, tu sitio no puede aparecer como fuente en las respuestas.

Algunos rastreadores sirven solo para entrenar modelos (p. ej. GPTBot, Google-Extended); otros, para la búsqueda en tiempo real y las peticiones de los usuarios (OAI-SearchBot, ChatGPT-User, PerplexityBot). Bloquear los bots de entrenamiento y permitir los de búsqueda es una opción habitual y equilibrada.

• Estado de permiso de cada rastreador de IA en el archivo robots.txt
• Distinción entre bots de búsqueda, de peticiones de usuarios y de entrenamiento
• Existencia y tamaño del archivo llms.txt
• Etiquetas noai / noimageai y X-Robots-Tag de la página