How To Add Custom Robots.txt File In Blogger/Blogspot || How do you edit your Robots.txt file on Blogger? || Blogger Blog में Custom Robots.Txt File क

How To Add Custom Robots.txt File In Blogger/Blogspot || How do you edit your Robots.txt file on Blogger? || Blogger Blog में Custom Robots.Txt File कैसे Add करे 

Hellow Friends! नमस्कार, आप सभी का मेरे ब्लॉग "ज्ञान का फूल " में स्वागत है | दोस्तों आज के इस पोस्ट में मैं आपको बताऊंगा की आप कैसे अपने ब्लॉग या वेबसाइट में custom robots.txt फाइल add कर सकते है | इस लिए दोस्तों यदि आप ब्लॉग्गिंग का शौक रखते है तो आपके लिए यह पोस्ट बहुत ही महत्वपूर्ण हो जाता है | तो चलिए दोस्तों जानते है की यह Custom Robots.txt फाइल क्या होता  है और किसी भी ब्लॉग या वेबसाइट के लिए यह क्यों बहुत महत्वपूर्ण है |

How To Add Custom Robots.txt File In Blogger/Blogspot || How do you edit your Robots.txt file on Blogger? || Blogger Blog में Custom Robots.Txt File कैसे Add करे 

Que 1. Robots.txt क्या है?  [What Is robots.txt in blogger, Wordpress or any Blog ] 

Ans :  robots.txt सर्च इंजन रोबोट के लिए किसी भी blog या website के किसी पेज को Explor या browse करने के लिए एक command है । 

robots.txt किसी भी Blog Or Website को Search Engine से Filter करता है ।

Que 2 :  Robots.txt किस प्रकार काम करता है ?

Ans : मान लीजिए कि Robot एक Webpage Url पर जाना चाहता है,

उदाहरण के लिए, https://gyankaphool.blogspot.com/ ऐसा करने से पहले, यह https://gyankaphool.blogspot.com/robots.txt की जांच करेगा, और फिर यह विशेष Webpages तक पहुंच जाएगा। 

Que 3 : Robots.txt file को ब्लॉग या website में add करने का कारन ?

Ans : किसी भी blog या website में robots.txt file blog को अनुक्रमित करने और website के Pages को तेजी से Crawll कराने का कार्य करता है | इस लिए आपको अपने blog या website में इस custom robots.txt फ़ाइल को जोड़ना चाहिए। यह सर्च इंजन ऑप्टिमाइजेशन "Search Engine Optimization" का एक हिस्सा है | इस लिए आपको इसके बारे में पूर्ण रूप से जानकारी होना अति आवश्यक है |

Que 4 : What is the Syntax of Default Robots.txt file ?

Ans : Blogging की दुनिया में robots.txt फ़ाइल का विशेष syntax या प्रारूप है जो विशेष coding के format में होता है जिसे स्वयं blogger या blogspot द्वारा निर्धारित किया गया है |

किसी भी blog या website का blogger में डिफाल्ट रूप से से robots.txt file निम्न लिखित प्रारूप में पाया जाता है | 

Syntax of default robots.txt file is given to bellow : 

User-agent: Mediapartners-Google

Disallow:

User-agent: *

Disallow: /search

Allow: /

Sitemap: https://gyankaphool.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500 

Que 5 : What is the Meaning of above Codes in the Syntax of Default Robots.txt file ?

Ans : ऊपर दिए गये Robots.txt file में सभी बिन्दुओ का विशेष उपयोग होता है | आइये जानते है ये कौन कौन से विशेष शब्द होता है जो की इस फाइल में महत्वपूर्ण होता है |

i ) User-agent: Mediapartners-Google  :

यह Command आपके blog या website के एडसेंस बॉट को आपके ब्लॉग को क्रॉल करने की अनुमति देने के लिए कहता है. यदि आप अपने ब्लॉग पर Google Adsense का उपयोग नहीं कर रहे हैं तो इस लाइन को हटा दें।

  ii )  Disallow : 

 यह कमांड सर्च इंजन बॉट्स को आपके ब्लॉग पर पेज क्रॉल करने से रोकता है।

iii)   User-agent : *

सभी रोबोट खोज इंजन / खोज इंजन

iv ))  Disallow: / search :

खोज फोल्डर को crawll की अनुमति नहीं है , जैसे .... / खोज / लेबल और ... खोज / खोज ? अपडेट किया गया ... यहां खोज के लिए लेबल नहीं डाला गया है क्योंकि लेबल कोई यूआरएल नहीं है जो किसी विशिष्ट पृष्ठ की ओर इशारा करता है ।

उदाहरण : 

• https://gyankaphool.blogspot.com/search/label/SEO
• https://gyankaphool.blogspot.com//search/SEO 

v)  Allow: /

यह कमांड सभी पृष्ठों को क्रॉल करने की अनुमति देता है , सिवाय इसके कि ऊपर Disallow लिखा है । ( /) या उससे कम अंकित करें ।

Sitemap:  https://gyankaphool.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500   

Que 6 : ब्लॉग में robot.txt फाइल का उसे करके कुछ webpages को सर्च इंजन बोट द्वारा crawl करने से कैसे रोकें ?

Ans : किसी विशेष पृष्ठ को Google द्वारा क्रॉल करने से रोकने के लिए केवल Disallow कमांड का उपयोग करके इस पृष्ठ को अस्वीकृत करें। 

Example के लिए : यदि मैं अपने बारे में पृष्ठ को अनुक्रमित नहीं करना चाहता हूँ खोज इंजन । बस मैं Disallow : /search के ठीक बाद Disallow: /p/about-me.html  कोड पेस्ट कर दूंगा । 

कुछ webpages को सर्च इंजन बोट द्वारा crawl करने से कैसे रोकने के लिए Robots.txt File Code  :

User-agent: Mediapartners-Google

Disallow:

User-agent: *

Disallow: /search

Disallow: /p/about-me.html

Allow: /

Sitemap: https://gyankaphool.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500 

Que 7 : How to add Custom robots.txt file on blog/blogger || ब्लॉगर में कस्टम robots.txt फ़ाइल कैसे जोड़ें? :

Ans : दोस्तों ! किसी भी blog या website में robots.txt file को add करने के लिए निचे दिए गये स्टेप्स को फॉलो कीजिए - 

• Step 1 : अपने Blogger Dashboard पर जाएँ
• Step 2 : अब Settings >> Search Preferences >> Crawlers and indexing >> Custom robots.txt >> Edit >> Yes

How To Add Custom Robots.txt File In Blogger/Blogspot || How do you edit your Robots.txt file on Blogger? || Blogger Blog में Custom Robots.Txt File कैसे Add करे 

• Step 3 : अब अपने custom robots.txt file code को box में पेस्ट करें।
• Step 4 : अब Save Changes बटन पर Click करें।
• Step 5 : Now Done. अब आप अपनी robot.txt फ़ाइल देख सकते हैं। Please type in your web browser that -" https://gyankaphool.blogspot.com/robots.txt"
• Step 6 : robots.txt को ठीक से देखने के लिए निचे दिए गये लिंक को open कीजिए - https://gyankaphool.blogspot.com/robots.txt

Guideline : Here bellow Guideline for Que/Ans No 7 : 

1. ऊपर दिए गये robots.txt file को blog में add करने से सर्च इंजन रोबोट द्वारा website या blog के प्रत्येक pages को क्रॉल किया जाएगा | प्रत्येक blog में पहले से ही डिफ़ॉल्ट robots.txt होता है ।

2.  blogger में कस्टम robots.txt फ़ाइल जोड़ने से पहले आपको एक बात अपने दिमाग में रखनी चाहिए कि यदि आप robots.txt फ़ाइल का गलत उपयोग कर रहे हैं तो आपका पूरा blog Search Engine द्वारा अनदेखा कर दिया जाएगा। 

Conclusion :

तो दोस्तों हमें उम्मीद है, कि आपको हमारी यह पोस्ट "How To Add Custom Robots.txt File In Blogger/Blogspot || How do you edit your Robots.txt file on Blogger? || Blogger Blog में Custom Robots.Txt File कैसे Add करे " पसंद आई होगी। 

 इसे अपने दोस्तों में शेयर करें ताकि आपके दोस्तों को भी इस पोस्ट "How To Add Custom Robots.txt File In Blogger/Blogspot || How do you edit your Robots.txt file on Blogger? || Blogger Blog में Custom Robots.Txt File कैसे Add करे " के बारे में पता चल सके, और नीचे कमेंट करें, कि आपको हमारी यह पोस्ट कैसी लगी। 

 यदि आपका कोई प्रश्न है, तो नीचे Comment बॉक्स में हमें बताएं।