Construtor e testador de robots.txt

Método

Avalia regras por agente e caminho e gera um arquivo legível com alertas.

Como buscadores rastreiam, indexam e exibem resultados

Privacidade

Os dados são processados de forma efêmera para gerar o resultado. Arquivos CSV são analisados somente neste navegador e não são enviados nem armazenados.

Limitações

robots.txt controla rastreamento compatível; sozinho, não remove URLs conhecidas do índice.