robots.txt 작성 / 규칙 테스터
사용자 에이전트 및 경로에 적용되는 가장 긴 일치 규칙을 나타냅니다.
입력은 브라우저 내에서만 처리되며 전송, 저장, 기록되지 않습니다.
robots는 크롤링 제어이며 인증이나 색인 삭제가 아닙니다.
방법
사용자 에이전트 및 경로에 적용되는 가장 긴 일치 규칙을 나타냅니다.
프라이버시
입력은 브라우저 내에서만 처리되며 전송, 저장, 기록되지 않습니다.
한계
robots는 크롤링 제어이며 인증이나 색인 삭제가 아닙니다.
출처
- Robots Exclusion Protocol — IETF; 2022-09; 2026-08-14.