Robots.txt 테스터
robots.txt 파일을 테스트하고 검증하세요. Googlebot 및 Bingbot과 같은 검색 엔진 크롤러에 대해 URL이 차단되었는지 허용되었는지 확인하세요.
파싱된 규칙
2
User-agents
2
허용
2
차단
1
사이트맵
Test URL Access
사이트맵
- https://example.com/sitemap.xml
모범 사례
- • 크롤러가 콘텐츠를 찾을 수 있도록 항상 Sitemap 지시문을 포함하세요
- • 더 넓은 Disallow 규칙을 재정의하려면 Allow 규칙을 사용하세요
- • 올바른 크롤러 접근을 보장하기 위해 여러 유저 에이전트로 테스트하세요
- • 페이지 렌더링에 영향을 주는 CSS 및 JavaScript 파일 차단을 피하세요
🔒 즉시 결과, AI보다 빠름. 가입 불필요. 100% 프라이버시.