Robots.txt 생성기
크롤러별 Allow/Disallow 규칙과 sitemap 링크를 바로 붙여넣을 수 있게 생성
★★★★★ 수천 명이 애용
🔒 프라이버시 우선
⚡ 즉시 결과
프리셋
규칙
robots.txt
선택하는 이유
🔒
프라이버시 우선
입력은 안전하게 처리되며 판매되지 않습니다. 클라이언트 도구는 브라우저를 벗어나지 않습니다.
⚡
즉시·무료
설치 없이, 기다림 없이. 어떤 기기의 브라우저에서도 몇 초 만에 결과.
🎁
평생 무료
가입 없이, 워터마크 없이, 제한 없이. 모든 클라이언트 도구를 마음껏 사용하세요.
자주 묻는 질문
빈 Disallow 줄은 무엇을 의미하나요?⌄
뒤에 아무것도 없는 "Disallow:"는 "아무것도 금지하지 않음"을 의미합니다. 즉 이 크롤러는 어디든 접근할 수 있습니다. 이것이 바로 '모두 허용' 프리셋이 생성하는 결과입니다.
robots.txt가 실제로 페이지 색인을 막아주나요?⌄
그것만으로는 확실하지 않습니다. 규칙을 잘 지키는 크롤러에게 해당 경로를 가져가지 말라고 요청할 뿐입니다. disallow로 지정되어 있어도 다른 곳에서 링크되어 있으면 여전히 색인될 수 있습니다. 검색 결과에서 페이지를 확실히 제외하려면 noindex 메타 태그나 HTTP 헤더를 사용하세요.
제 콘텐츠가 어딘가에 업로드되나요?⌄
아니요. 모든 작업은 순수 JavaScript로 브라우저 안에서 처리됩니다. 입력한 내용은 서버로 전송되지 않습니다.