वेबसाइट के लिए robots.txt फ़ाइल उत्पन्न करें, सर्च इंजन क्रॉलर एक्सेस नियंत्रित करें
डेवलपर उपकरण
इस उपकरण के बारे में
आप वेबसाइट जनरेशन robots.txt फ़ाइल खोज कैसे आप पेज के माध्यम सेसरल कॉन्फ़िगरेशन उपयोगकर्ता अनुमति औरजोड़ना URL सभी प्रसंस्करण ब्राउज़र में स्थानीय रूप से पूरा होता है
मुख्य विशेषताएं
- उपयोगकर्ता कॉन्फ़िगरेशन के लिएविशिष्ट
- Allow Disallow समर्थन इनपुट
- शामिल Sitemap URL अनुकूलन SEO
- एक क्लिक उदाहरण लोड करें टेम्पलेट त्वरित शुरुआत
- साफ़ करेंआउटपुट रीसेटसभी
- कॉपीजनरेशन robots.txt
उपयोग के मामले
- खोज कर सकते हैं आपवेबसाइट पेज
- एडमिन बैकएंड और निजी निर्देशिकाओं तक पहुंच अवरुद्ध करें
- जोड़ना URL सहायताखोज आप सामग्री
- वेबसाइट जनरेशन robots.txt
- अलग उपयोगकर्ता निर्माण विशिष्ट
generator
seo
अक्सर पूछे जाने वाले प्रश्न
क्या है Robots.txt जनरेटर?
Robots.txt जनरेटर हाँ एक ऑनलाइन डेवलपर उपकरण वेबसाइट जनरेशन robots.txt फ़ाइल यहपूरी तरह आप ब्राउज़र मध्यम चलाना किसी भी सर्वर पर कोई डेटा नहीं भेजा जाता
robots.txt फ़ाइल क्या
robots.txt फ़ाइल खोज चाहिए चाहिए वेबसाइट पेज आंशिक यह सामग्री
चाहिएशामिल उपयोगकर्ता
आम उपयोगकर्ता शामिल Googlebot Google Bingbot Bing * एप्लिकेशन सभी कर सकते हैं अलग जोड़ना विशिष्ट उपयोग एप्लिकेशन समान
Allow Disallow क्याअंतर
Disallow Allow निर्माण Disallow अनुमति मध्यम विशिष्ट उदाहरण के लिए कर सकते हैं Disallow /private/ Allow /private/public/
चाहिए robots.txt मध्यमशामिल URL
हाँ robots.txt मध्यमशामिल URL खोज अधिकआसान फ़ाइल प्रारूप Sitemap: https://yoursite.com/sitemap.xml जोड़ना जनरेटर इनपुट