robots.txt 생성·검사기

RFC 9309 기준 User-agent 그룹 병합·가장 긴 일치·동률 Allow 우선, * 및 끝의 $ 지원. Crawl-delay 등 확장 지시문은 판정하지 않습니다. 실제 사이트를 조회하지 않으며 로컬 입력만 검사합니다. robots.txt는 접근 권한이나 보안 장치가 아닙니다.