Robots.txt 產生器
依爬蟲設定 Allow/Disallow 規則與網站地圖連結,一鍵複製使用
★★★★★ 數千用戶信賴
🔒 隱私優先
⚡ 即時出結果
預設
規則
robots.txt
為什麼選擇我們
🔒
隱私優先
你的輸入被安全處理,絕不出售;純客戶端工具完全不離開你的瀏覽器。
⚡
即時且免費
無需安裝、無需等待,幾秒出結果,在任意裝置的瀏覽器中完成。
🎁
永久免費
無需註冊、無浮水印、不限次數。所有客戶端工具都可以隨便用。
常見問題
空白的 Disallow 行代表什麼?⌄
只寫「Disallow:」而後面不加任何內容,代表「不禁止任何內容」——也就是這個爬蟲可以存取所有頁面。這正是「全部允許」預設所產生的效果。
robots.txt 真的能阻止頁面被收錄嗎?⌄
並不能完全保證——它只是要求遵守規則的爬蟲不要抓取某個路徑。即使被禁止抓取,頁面仍可能因外部連結等原因被收錄。要真正把頁面排除在搜尋結果之外,應改用 noindex 元標籤或 HTTP 標頭。
我的內容會被上傳到別處嗎?⌄
不會——一切都以純 JavaScript 在你的瀏覽器端執行,你輸入的內容不會傳送到任何伺服器。