Validador de Robots.txt

Valide su archivo robots.txt actual y compruebe si hay rastreadores en la página de restricciones y accesibilidad.

Googlebot

Enter the URL in the format: https://example.com/

Robots.txt validation results

Validación de archivos: comprobar que robots.txt cumple con los estándares e identificar posibles errores.
Análisis de indexación: haz un seguimiento de cómo los rastreadores de los motores de búsqueda indexan tu sitio e identifica las áreas problemáticas.
Correcciones de errores: ayudan a detectar y corregir errores en el archivo robots.txt para una indexación óptima.
Pruebas de instrucciones: simule cómo los robots interactúan con su archivo y verifique cómo funcionan las instrucciones.

Cómo validar Robots.txt

Introduzca la URL del dominio o coloque el contenido de Robots.txt en el cuadro de texto.
Pulse el botón «Validar robots.txt».
El resultado aparecerá como una lista inmediatamente después de completar la validación.

PREGUNTAS MÁS FRECUENTES

¿Qué es la validación de robots.txt?

Robots.txt Checker muestra si el archivo robots.txt bloquea los rastreadores de Google de determinadas URL de tu sitio. Por ejemplo, puedes usar esta herramienta para comprobar si el rastreador del robot de Google puede rastrear la URL del contenido que quieres bloquear en la Búsqueda de Google.

¿Qué ocurre si no utilizas un archivo robots.txt?

Si no tienes un archivo robots.txt en el directorio raíz de tu sitio web, los rastreadores de los motores de búsqueda no podrán encontrarlo. Como resultado, asumirán que tienen permiso para rastrear todo el sitio.

¿Cuál es el límite de un archivo txt de robot?

Google aplica un límite de tamaño de archivo robots.txt de 500 KB (KB). Se ignora el contenido que supere el tamaño máximo de archivo. Puede reducir el tamaño de los robots.

¿Es Robots.txt obligatorio?

Robots.txt no es necesario para el sitio web. Si un bot visita tu sitio y no tiene uno, simplemente rastreará tu sitio e indexará las páginas como de costumbre. Robots.txt solo es necesario si quieres tener más control sobre lo que se escanea.

Productos

Sitios web

Sobre

Language

User Name