robots.txtジェネレーター
クローラーごとのAllow/Disallowルールとsitemapリンクを、そのまま貼り付け可能な形で生成
★★★★★ 数千人が愛用
🔒 プライバシー重視
⚡ すぐに結果
プリセット
ルール
robots.txt
選ばれる理由
🔒
プライバシー重視
入力は安全に処理され、販売されません。クライアント側ツールはブラウザから一切出ません。
⚡
すぐ・無料
インストール不要、待ち時間なし。あらゆる端末のブラウザで数秒で結果。
🎁
ずっと無料
登録不要・透かしなし・回数無制限。クライアント側ツールはすべて好きなだけ使えます。
よくある質問
空のDisallow行はどういう意味ですか？⌄
「Disallow:」の後に何も書かない場合、「何も禁止しない」という意味になります。つまりこのクローラーはすべてのページにアクセスできます。これは「すべて許可」プリセットが生成する内容と同じです。
robots.txtは本当にページのインデックスを止められますか？⌄
それ単体では確実ではありません。行儀の良いクローラーに対して、そのパスを取得しないよう求めるだけです。disallowされていても、他所からリンクされているなどの理由でページがインデックスされることはあります。検索結果から確実にページを除外したい場合は、noindexメタタグやHTTPヘッダーを使ってください。
入力した内容はどこかにアップロードされますか？⌄
いいえ。すべて純粋なJavaScriptでブラウザ内で処理されます。入力内容がサーバーに送信されることはありません。