Construtor e testador de robots.txt
Avalia regras por agente e caminho e gera um arquivo legível com alertas.
Os dados são processados de forma efêmera para gerar o resultado. Arquivos CSV são analisados somente neste navegador e não são enviados nem armazenados.
robots.txt controla rastreamento compatível; sozinho, não remove URLs conhecidas do índice.
Método
Avalia regras por agente e caminho e gera um arquivo legível com alertas.
Privacidade
Os dados são processados de forma efêmera para gerar o resultado. Arquivos CSV são analisados somente neste navegador e não são enviados nem armazenados.
Limitações
robots.txt controla rastreamento compatível; sozinho, não remove URLs conhecidas do índice.
Fontes primárias
- Robots Exclusion Protocol — IETF; 2022-09; 2026-08-14.