What is Robots.txt and How to Add Custom Robots.txt File in Blogger (Blogspot)?
“How to Add Custom Robots.txt File in Blogger” Robots.txt is a file that tells the search engine crawlers what page to crawl and what not to. Simply, you can absolve your blog demo pages, label pages, archive pages, and others that you don’t consider as important. Search engine crawlers always scan the robots.txt file before crawling any blog.
(Robots.txt एक फ़ाइल है जो खोज इंजन को क्रॉलर बताती है कि कौन सा पृष्ठ क्रॉल करना है और क्या नहीं। बस, आप अपने ब्लॉग डेमो पेज, लेबल पेज, संग्रह पेज और अन्य को अनुपस्थित कर सकते हैं जिन्हें आप महत्वपूर्ण नहीं मानते हैं। किसी भी ब्लॉग को क्रॉल करने से पहले खोज इंजन क्रॉलर हमेशा robots.txt फ़ाइल को स्कैन करते हैं।)
When a robot search engine crawler is visiting a page or website, robots.txt is the first thing it looks for is the robots.txt file. As a Blogger user, you now have the option to control what the search engine crawlers should follow and index from your website or blog.
“How to Add Custom Robots.txt File in Blogger” Follow this Simple Steps:
[1] Go to your blogger dashboard > Settings > Search Preferences > Crawling and Indexing. (अपने ब्लॉगर डैशबोर्ड> सेटिंग्स> Search Preference> क्रॉलिंग और इंडेक्सिंग पर जाएं)
[2] Click ‘Custom robots.txt‘ > click ‘yes‘. (‘कस्टम robots.txt’ > ‘हां’ पर क्लिक करें)
[3] Paste your custom robots.txt. (An example is given below) (कस्टम robots.txt पेस्ट करें)
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: http://example.blogspot.com/feeds/posts/default?orderby=UPDATED
Note: – Remember to change the highlighted URL (example.blogspot.com) with your blog address.
[4] Click ‘Save changes’ to save the custom robots.txt. (कस्टम robots.txt को save करने के लिए ‘Save changes’ पर क्लिक करें)
Read Here: How to Add Meta Description in Blogger? Blogger me Meta Description kese lagaye?
No comments:
Post a Comment