Robots.txt जनरेटर
अनुज्ञा नियमों के साथ एक robots.txt फ़ाइल बनाएँ, WordPress और स्टोर्स के लिए प्रीसेट, साइटमैप लिंक और AI प्रशिक्षण बॉट्स के वैकल्पिक ब्लॉकिंग।
- मुफ़्त, कोई सीमा नहीं
- आपके ब्राउज़र में चलता है
- कोई साइन-अप नहीं
Loading tool…
कैसे करें इस्तेमाल — Robots.txt जनरेटर
- अपनी साइट का यू. आर. एल. दर्ज करें या एक पूर्वनिर्धारित चुनें।
- अवरुद्ध करने या अनुमति देने के लिए मार्गों की सूची बनाएं, और ए. आई.-क्रॉलर अवरोधन चुनें।
- robots.txt डाउनलोड करें और इसे अपनी साइट रूट पर अपलोड करें।
अक्सर पूछे जाने वाले प्रश्न
क्या robots.txt Google से पृष्ठ हटा देता है?
नहीं। यह अनुक्रमण नहीं, क्रॉल करना बंद कर देता है। उन पृष्ठों के लिए एक नोइंडेक्स मेटा टैग का उपयोग करें जो खोज में नहीं दिखना चाहिए।
कौन से ए. आई. क्रॉलर अवरुद्ध हैं?
जीपीटीबॉट, चैटजीपीटी-यूजर, ओएआई-सर्चबॉट, क्लॉडबॉट, एंथ्रोपिक-आई, गूगल-एक्सटेंडेड, पर्प्लेक्सिटीबॉट, सीसीबॉट, बाइटस्पाइडर, एप्पलबॉट-एक्सटेंडेड और मेटा-एक्सटर्नलजेंट।
मैं फ़ाइल कहाँ रखूँ?
आपके डोमेन के मूल पर, उदाहरण के लिए https://example.com/robots.txt।
संबंधित उपकरण
एक्स. एम. एल. साइटमैप जनरेटरपृष्ठ यू. आर. एल. की सूची को लास्टमॉड, वैकल्पिक चेंजफ्रेक और प्राथमिकता के साथ एक वैध…मेटा टैग जनरेटरएस. ई. ओ. शीर्षक, मेटा विवरण, कैनोनिकल, ओपन ग्राफ और ट्विटर कार्ड टैग को लाइव गूगल…स्कीमा मार्कअप जनरेटर (JSON-LD)Google समृद्ध परिणामों के लिए अर्हता प्राप्त करने के लिए स्थानीय व्यवसाय, संगठन…यूट्यूब थंबनेल दर्शकहर आकार में अपने सार्वजनिक थंबनेल का पूर्वावलोकन करने के लिए एक YouTube लिंक…यू. आर. एल. स्लग जनरेटरब्लॉग शीर्षकों और उत्पाद नामों को स्वच्छ, छोटे अक्षरों, एसईओ-अनुकूल यूआरएल स्लग में…रंग कंट्रास्ट चेकरसुलभ, पठनीय वेबसाइटों के लिए डब्ल्यू. सी. ए. जी. 2.1 ए. ए. और ए. ए. ए. के विरुद्ध पाठ…