Robots.txt जनरेटर
हर crawler के लिए Allow/Disallow rules और sitemap links, paste करने के लिए तैयार
लोग हमें क्यों चुनते हैं
डिज़ाइन से निजी
आपका इनपुट सुरक्षित रूप से संसाधित होता है और कभी नहीं बेचा जाता। क्लाइंट-साइड टूल आपके ब्राउज़र से बाहर नहीं जाते।
तुरंत और मुफ़्त
कोई इंस्टॉल नहीं, कोई इंतज़ार नहीं। कुछ ही सेकंड में परिणाम, आपके ब्राउज़र में, किसी भी डिवाइस पर।
हमेशा के लिए मुफ़्त
कोई साइन-अप नहीं, कोई वॉटरमार्क नहीं, कोई सीमा नहीं। सभी क्लाइंट-साइड टूल जितना चाहें उपयोग करें।
अक्सर पूछे जाने वाले प्रश्न
खाली Disallow लाइन का क्या मतलब है?⌄
सिर्फ "Disallow:" लिखना और आगे कुछ न लिखना का मतलब है "कुछ भी disallow नहीं" — यानी इस crawler को हर जगह access मिला है। Allow-all preset यही generate करता है।
क्या robots.txt वाकई pages को index होने से रोकता है?⌄
अकेले यह पूरी तरह भरोसेमंद तरीका नहीं है — यह सिर्फ अच्छे-व्यवहार वाले crawlers से request करता है कि वे किसी path को fetch न करें। कोई page फिर भी index हो सकता है (जैसे अगर कहीं और से उसे link किया गया हो) भले ही उसे disallow किया गया हो। किसी page को search results से पूरी तरह बाहर रखने के लिए noindex meta tag या HTTP header का इस्तेमाल करें।
क्या मेरा content कहीं upload होता है?⌄
नहीं — सब कुछ plain JavaScript के ज़रिए आपके browser में ही चलता है। आप जो भी टाइप करते हैं वह कभी किसी server को नहीं भेजा जाता।
संबंधित टूल
संबंधित टूल
Meta Tags जनरेटर
title, description, keywords, canonical और robots meta tags, साथ में लाइव Google search प्रीव्यू
Social Share प्रीव्यू
Open Graph + Twitter Card tags, साथ में लाइव Facebook/Twitter-स्टाइल प्रीव्यू कार्ड
Sitemap जनरेटर
URLs की एक list paste करें, तुरंत तैयार XML sitemap या sitemap index पाएं