Verificador de sitemap
Valide XML do sitemap, quantidade de URLs e problemas estruturais.
SEO
Testador de Robots.txt
Busque e analise robots.txt público, diretivas e referências de sitemap com segurança.
Seu conteúdo é processado apenas conforme necessário para esta ferramenta.
Testador de Robots.txt
robots.txt é um arquivo de controle de crawlers, não um sistema de controle de acesso. Este tester busca o arquivo público e destaca diretivas e referências de sitemap para diagnosticar bloqueios acidentais ou hints de descoberta ausentes.
Como usar
- Informe a URL pública ou domínio que você deseja analisar.
- Execute a verificação para que o Ciatto Tools colete somente os sinais necessários para este diagnóstico.
- Revise o resultado, os avisos e as verificações relacionadas antes de tomar uma decisão de segurança ou configuração.
Como interpretar o resultado
Uma regra Disallow orienta crawlers compatíveis a não rastrear determinados caminhos, mas não torna essas URLs privadas. Conteúdo sensível precisa de autenticação e autorização reais.
Limitações
Diferentes crawlers interpretam regras conforme seu comportamento documentado. A ferramenta analisa o arquivo e diretivas comuns; não substitui um teste específico de crawler e URL.
Perguntas frequentes
robots.txt esconde uma página de todo mundo?
Não. É uma diretiva para crawlers, não uma barreira de segurança. Quem conhece a URL ainda pode acessá-la se não houver proteção separada.
robots.txt deve apontar para o sitemap?
Pode. A diretiva Sitemap é um hint útil de descoberta, embora sitemaps também possam ser enviados por ferramentas dos buscadores.