Support Me India

Robots.txt File Ko Blog Me Kaise Add Kare – Step by Step Full Guide

by: ,

आज मैं आपको बताने जा रहा हूँ की blog में robots.txt code कैसे use करते है। आपने पहले भी इसे try तो किया होगा but error आता होगा तो चलिए आज हम इसे सही तरीके से add करना सीख लेते है अगर आप चाहते है की आपकी blogging के साथ साथ गोपिनियता भी बनी रहे तो robots.txt add करना बेहतर होगा।

robots.txt file

Robots.txt एक file है blogger ने इसे blog में इसलिए add किया है ताकि हम इसकी help से कुछ प्राइवेट बाते google जैसे search engine से छिपा सके। ये blog की हर post हर page में होता है आप चाहे जिसे google, bing, yahoo जैसे search engine से छिपा सकते हैं।

Robots.txt कैसे काम करता हैं?

थोड़ी देर के लिए मान लीजिए robots.txt आपकी website का bodyguard है अब जब भी कोई users हमारी website से related कोई topic किसी search engine में search करता है तो search engine हमारी website पर आता है तो आपकी website का bodyguard यानी robot.txt उसे बताता है की उसे इस website पर क्या क्या दिखाना allow है। तो दोस्तों इस तरह robots.txt file हमारी website की privacy की security करता हैं।

अपने Blog के लिए Robots.txt File कैसे बनाए?

वैसे तो कई websites है blog के लिए robot.txt file बनाने वाली but अगर वो true होती तो थोड़ी देर के लिए सोचो blogger ने आज तक ये service start नहीं की हैं। मैं आपको इतना ही कहना चाहूँगा की आपको कही जाने की आवश्यकता नहीं है। यहाँ आज मैं आपको robots.txt file के वो code दे रहा हूँ जो blogger के बताए हुए हैं आप चाहे तो इसे blogger help forum में जाकर देख सकते हो। अगर आप ये देखना चाहते हो तो उसके लिए यहाँ पर click कीजिए Click hare.

1. User – agent: Media partners – Google

यह एक google adsense robot है अगर आप अपने blog में adsense के code use करते हो तो आप इसको use कर के search engine से अपने code छिपा सकते हो अगर adsense use नहीं करते है तो आपके लिए ये कोई जरुरी नहीं हैं।

2. User – agent:

यह आपकी website के सभी users के लिए है उन्हें आपकी website में क्या क्या देखना चाहिए और क्या नहीं तो इसे dish allow ही रहने दीजिए ताकि हमारे blog की security बनी रहे।

3. Disallow: /search

यह code आपकी website के keyboards के लिए है इसे हमे अपनी website के लिए not allow करना चाहिए ताकि search engine इसे ना दिखा सके। आप चाहे तब यहाँ अपनी website के किसी page, post या keyboard का URL यहाँ डाल के sdish allow कर सकते है जैसे :- https://www.supportmeindia.com/label/blogger

4. Allow:

यहाँ पर आप search engine को क्या क्या show करना है वो सैट कर सकते है अगर आप इसे सभी पर allow रहने दे तो ही अच्छा रहेगा।

5. Sitemap 

ये सबसे important है sitemap search engine को हमारी website की new post की जानकारी देता है उसे कब क्या search करना है कौनसी post में कितने URL है कौनसी सबसे popular है और भी बहुत काम है sitemap के दोस्तों blog में robot. txt file add करने से पहले आपको अपने blog के लिए sitemap बनना होगा। आप यहाँ पर click कर के पहले अपने blog के लिए sitemap बना सकते हैं। अपनी Website (Blog) के लिए Google Sitemap कैसे बनाए ?

User-agent: Mediapartners-Google
 Disallow:
 User-agent:
 Disallow: /search
 Allow: /
 Sitemap: https://www.supportmeindia.com/sitemap.xml

इस code को copy कर लीजिए copy करने से पहले इसमें https://www.supportmeindia.com//sitemap.example की जगह खुद की website का sitemap add कर लीजिए।

Robots.txt File को Blog में कैसे Add करें?

Step 1:

1. सबसे पहले blogger.com website पर जाइए।

Crawl and indexing

  1. अब Blog की settings में जाइए।
  2. Search preferences पर click कीजिए।
  3. अब Custom Robots.text के सामने edit पर click कीजिए।

Step 2:

Custom robot.txt

  1. Yes पर tick कर दीजिए।
  2. यहाँ ऊपर दिया गया code paste कर दीजिए।
  3. अब आपको Save changes पर click करना हैं।

अब आपके blog में robots.txt file add हो चुकी है आप कोई भी search engine जो आपको robot.txt file allow करेगा वही दिखाएगा।

Note :- अगर आप अपने blog में से कोई चीज publish नहीं करना चाहते है तो ही इस robots.txt file को अपने blog में add करें। अगर आपको कोई page, post keyboard, label search engine से नहीं छिपाना है तो आप अपने blog में robot.txt add ना करें।

आपको robot.txt file से related कोई सवाल पूछना है तो comment में पूछ सकते हो।

उम्मीद है आपको ये post अच्छी लगी होगी अगर हाँ तो हमारी website की और भी post पढ़िए और हमारी post को अपने सभी friends के साथ social media पर शेयर भी कीजिए।

Related Posts for You

Reader Interactions

Comments (119)

  1. Page block by robot. txt valid with warring me error hai yellow color. Search or label k karan ho raha hai. Ese fix kese kare.

  2. Bahut hi achhi jaankari sir par mere blog me 21 pages valid with warning 1 issue ke sath show kar raha hai aur ye robot.txt dwara block kar diya gaya hai jo yellow signal ke sath show kar raha hai. ismen label ya categories hai jo robot.txt dwara block hai.
    sath me coverage issue me 0 no issue show kr raha hai. Valid me 18 or Exluded me 64 kya isse mere blog ki search engine me koi fark padega ya 21 jo effected page hain unhe unblock karna jaruri hai ?
    please guide karein.

    • जब तक आपको robot.txt code की समझ ना हो तब तक आप default robot.txt उपयोग करो

  3. Bhai mera website google aur bing do search console mai submit kiya hai to dono k liye robots txt file banana padega.

    • नहीं एक ही बहुत है।

  4. Bhai Google AdSense ka approval nhi Mila hai or application approval ke liye bheji hai to (User-agent: Mediapartners-Google) ka use robot.txt me use Kar sakte hai.

    • नहीं, ads.txt फाइल में करना है

      • Sir ye code User-agent: Mediapartners-Google
        Disallow:
        Ads.txt ko block kar deta h

        • नहीं पर इसको use करने की जरुरत नहीं है

  5. Blogger Blog ke liye jo robot.txt code hai kya sirf use blogger me hi submit karein ya fir us same code ko search console me bhi submit karein.
    apka is code me sitemap alga hai aur mera atom wala sitemap hai to kya usse koi problem ho sakti hai ?

    • Search console में भी submit करना है, No problem.

  6. Mere blog par 3 warning aai h unko kese fix karna hai mujhe kya karna chaiye

    • Warning क्या है?

  7. meine appka code save kiya hei save ho gaya hei blog mein.
    aur mein koi post chipana nahi chahta sari post dikhana chahta hun to is code se koi dikkat to nahi hei.

  8. Bro agar robots tex file add karna jaruri hai kya nahi, nahi kare to blog ranking me kuch asar ho sata hai kya. Plz bataye

    • Nahi, agar aap apne blog ke kisi content ko search engine se hide nahi karna chahate hai to jarurat nahi hai.

  9. Robot.txt file ko remove karna h kese hoga

    • robots.txt se all code ko remove kar do.

  10. Hello sir mere site blogger me hai aur Maine robot txt ko disable Kiya hai aur jab mai apne site ke url dalkar /search karta hu to blocked by robot txt dikha Raha hai pls help site ka url to search engine me aa Gaya hai lekin name search Karne per Nahi aa Raha hai

    • search console me site url ko fetch karke dekho jo bhi reason hoga pata chal jayega.

  11. index hue lebel, categories and archive ko kaise hataye

    • noindex tag add karke.

      • no index tag kaise add kare please ye thoda detail mai bata dijiye Sir

  12. Thank you sir, ap ne bahat achhi tarike se samajhaya hai.

  13. Hello sir
    Aapne mujhe jo code diya tha wo mene search console and wp robots.txt me add kiya fir bhi post open karne par error aaraha hai sir meri site ki koi bhi post 4 day se open nahi ho rahi hai sir aap koi aisa robot txt file code de jo wp and search console me work kare sir me bahut problem hu plz sir helm me.

    • code search console me nahi blog robots.txt file me add karna hai.

  14. Hii sir
    Aapke dwara diya code me Robots.txt file me submit kar diya hai jab me page ko refresh karta hu to wo code show nahi hota hai and post open karne par fir bhi error aaraha hai plz help me

    • Code ko wordpress dashboard >> yoast seo >> tools setting me ja kar robots.txt file me add karo.

  15. Hello Sir
    Search console robots.txt tester me jo code hota hai wo mujhse galti se delete ho gaya hai ab meri site ki koi bhi post open nahi ho rahi hai error aaraha hai ab wo code mere pass nahi hai jo me dubara se add kar deta sir aap hi kuch bataye me kya karu me wordpress par hu.

    • Aap ye code robots.txt file me add kar sakte ho.

      User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php

  16. सर, मैंने पहले ही रोबोट डॉट टीएक्सटी फाइल को ब्लॉग में ऐड कर लिया था, लेकिन जब आज मैंने सर्च प्रेफरेंसेस में देखा तो वहां पर कस्टम रोबोट डॉट टीएक्सटी डिसेबल्ड था, तो क्या इसका मतलब अब मुझे फिर से रोबोट डॉट टीएक्सटी फाइल को ऐड करना पड़ेगा?

    • Aap blog me robots.txt code add karo na ki search console me .

  17. This post is very useful…

  18. hello sir mai apke blog ka ragular vistor hu aur mai apse hi blogging seekh raha hu maine bhi ek website banai hai please sir hamari site ko dekh kar bataye ki usme kya kami rah gai hai.

    • Koi kami nahi hai bahut achha blog hai.

  19. Sir bahut badhiya post likhi hai apne ye post har blogger ke liye helpful hai.

  20. One more question i want to ask: mene abhi apne blog ko adsense ke lie apply nhi lia hai, uske bad bhi new Google search console me Total Impression,Total Clicks aur Average CTR show ho rha hai… Esa kyu hai sir???please Reply me ASAP

    • Ye google search traffic ki report hai.