Gratis · Sin registro

Prueba y validación de robots.txt

Leeremos el archivo robots.txt de tu sitio y te mostraremos sus grupos de reglas, líneas Sitemap y reglas arriesgadas. Escribe una URL y ve al instante qué bots pueden acceder.

Se lee el archivo robots.txt de la raíz de tu dominio; después puedes probar URL y editar el archivo.

¿Cómo funciona robots.txt?

robots.txt es el archivo situado en la raíz de tu sitio que indica a los bots qué rutas pueden rastrear. Google aplica la regla más larga (la más específica) que coincide con una URL; en caso de empate, gana Allow.

robots.txt no elimina páginas del índice, solo bloquea el rastreo. Si no quieres que una página aparezca en Google, usa meta robots noindex.

  • User-agent: el bot al que se aplican las reglas
  • Disallow y Allow: rutas bloqueadas y permitidas (se admiten * y $)
  • Sitemap: la URL de tu sitemap XML
  • Prueba de reglas: estado de una URL para Googlebot, Bingbot, GPTBot y otros bots

Preguntas frecuentes

¿Qué significa Disallow: /?
Impide que el bot correspondiente rastree todo el sitio. Si está en el grupo User-agent: *, se bloquean todos los bots y el sitio puede ir desapareciendo de los resultados de búsqueda.
¿Debo bloquear los archivos CSS y JS?
No. Google renderiza las páginas como un navegador; si se bloquean CSS y JS, no puede entender bien la página y puede detectar problemas de compatibilidad móvil.
¿Cuándo se aplican los cambios?
Google suele guardar en caché el archivo robots.txt hasta 24 horas. Puedes pedir que se vuelva a rastrear desde el informe de robots.txt de Search Console.

Otras herramientas gratis

Redirecciones y cabeceras HTTPCadena 301/302, HTTPS y cabeceras de seguridad Comprobador de sitemap XMLNúmero de URL, errores y lastmod Comprobación masiva de códigos de estadoEstado HTTP y redirecciones de hasta 20 URL Comprobador de hreflangEtiquetas de idioma en sitios multilingües Análisis SEOMás de 80 comprobaciones, puntuaciones por categoría y recomendaciones priorizadasPopular Auditoría SEO del sitioRevisión técnica y on-page de hasta 15 páginasPopular

Todas las herramientas gratis

Descubre en 20 segundos cómo está tu sitio.

Descubre tus problemas técnicos y tus carencias de visibilidad en IA con un análisis gratuito; después, deja la corrección en manos de AutoAiSeo.

  • Sin tarjeta
  • Configuración en 5 minutos
  • Cancela cuando quieras
Analizar gratis