한국어
Robots.txt 생성기
robots.txt 파일 생성, 검증, 테스트. AI 크롤러 차단, WordPress/Shopify/Wix 템플릿. 무료.
Platform Preset
Rules
AI Crawlers
Control which AI bots can access your site
AI Training Crawlers
AI Search Bots
Social Media Crawlers
Blocking these may break link previews
Sitemap URL
Crawl-Delay
seconds
Preview
Everything runs in your browser — no data sent to any server
robots.txt 만드는 방법
- 템플릿 선택
- 규칙 추가
- AI 크롤러 차단
- Sitemap 추가
- 미리보기 및 다운로드
AI 크롤러 제어
GPTBot, Google-Extended 등 학습 크롤러를 차단하면서 Googlebot과 Bingbot을 허용합니다.
플랫폼 템플릿
WordPress, Shopify, Wix, 콘텐츠 사이트에 최적화된 템플릿.
robots.txt 검증
구문 오류, 중복 규칙, 누락된 Sitemap 선언을 확인합니다.
URL 접근 테스트
User-Agent를 선택하고 경로를 입력하여 URL이 허용되는지 차단되는지 확인합니다.
무료, 비공개, 무제한
완전히 브라우저에서 실행됩니다. 업로드 없음, 계정 없음, 제한 없음.
자주 묻는 질문
robots.txt 파일은 검색 엔진 크롤러에게 어떤 페이지에 접근할 수 있는지 알려줍니다. 도메인의 루트 디렉토리에 위치합니다.
정확히는 아닙니다. 크롤링을 방지하지만 다른 사이트가 링크하면 페이지가 나타날 수 있습니다. 완전한 차단에는 noindex를 사용하세요.
네! 이 도구에는 AI 학습 크롤러를 차단하면서 AI 검색 봇을 허용하는 토글이 있습니다.
템플릿은 WordPress, Shopify, Wix 또는 콘텐츠 사이트에 최적화된 robots.txt를 제공합니다.
아니요. 모든 것이 100% 브라우저에서 실행됩니다. 데이터가 업로드되거나 저장되지 않습니다.
파일을 다운로드하여 웹사이트의 루트 디렉토리에 업로드하세요.
Join our WhatsApp channelGet updates on new tools and tips directly to your phone
Join →전체 잠재력 해제
모든 도구에 대한 무제한 액세스, 우선 처리 및 프리미엄 기능을 이용하세요.