Verificador de sitemap
Valida XML del sitemap, cantidad de URLs y problemas estructurales.
SEO
Probador de Robots.txt
Obtén y analiza robots.txt público, directivas y referencias de sitemap de forma segura.
Tu contenido se procesa solo según lo requerido por esta herramienta.
Probador de Robots.txt
robots.txt es un archivo de control de crawlers, no un sistema de control de acceso. Este tester obtiene el archivo público y destaca directivas y referencias de sitemap para diagnosticar bloqueos accidentales o señales de descubrimiento ausentes.
Cómo usarla
- Introduce la URL pública o el dominio que deseas analizar.
- Ejecuta la verificación para que Ciatto Tools recopile solo las señales necesarias para este diagnóstico.
- Revisa el resultado, las advertencias y las comprobaciones relacionadas antes de tomar una decisión de seguridad o configuración.
Cómo interpretar el resultado
Una regla Disallow indica a crawlers compatibles que no rastreen ciertas rutas, pero no convierte esas URLs en privadas. El contenido sensible necesita autenticación y autorización reales.
Limitaciones
Diferentes crawlers interpretan reglas según su comportamiento documentado. La herramienta analiza el archivo y directivas comunes; no sustituye una prueba específica de crawler y URL.
Preguntas frecuentes
¿robots.txt oculta una página a todo el mundo?
No. Es una directiva para crawlers, no una barrera de seguridad. Quien conozca la URL aún puede solicitarla si no existe protección separada.
¿robots.txt debe incluir el sitemap?
Puede. La directiva Sitemap es una señal útil de descubrimiento, aunque los sitemaps también pueden enviarse mediante herramientas de los buscadores.