Robots.txt File Ko Blog Me Kaise Add Kare – Step by Step Full Guide

आज मैं आपको बताने जा रहा हूँ की blog में robots.txt code कैसे use करते है। आपने पहले भी इसे try तो किया होगा but error आता होगा तो चलिए आज हम इसे सही तरीके से add करना सीख लेते है अगर आप चाहते है की आपकी blogging के साथ साथ गोपिनियता भी बनी रहे तो robots.txt add करना बेहतर होगा।

robots.txt file

Robots.txt एक file है blogger ने इसे blog में इसलिए add किया है ताकि हम इसकी help से कुछ प्राइवेट बाते google जैसे search engine से छिपा सके। ये blog की हर post हर page में होता है आप चाहे जिसे google, bing, yahoo जैसे search engine से छिपा सकते हैं।

Robots.txt कैसे काम करता हैं?

थोड़ी देर के लिए मान लीजिए robots.txt आपकी website का bodyguard है अब जब भी कोई users हमारी website से related कोई topic किसी search engine में search करता है तो search engine हमारी website पर आता है तो आपकी website का bodyguard यानी robot.txt उसे बताता है की उसे इस website पर क्या क्या दिखाना allow है। तो दोस्तों इस तरह robots.txt file हमारी website की privacy की security करता हैं।

अपने Blog के लिए Robots.txt File कैसे बनाए?

वैसे तो कई websites है blog के लिए robot.txt file बनाने वाली but अगर वो true होती तो थोड़ी देर के लिए सोचो blogger ने आज तक ये service start नहीं की हैं। मैं आपको इतना ही कहना चाहूँगा की आपको कही जाने की आवश्यकता नहीं है। यहाँ आज मैं आपको robots.txt file के वो code दे रहा हूँ जो blogger के बताए हुए हैं आप चाहे तो इसे blogger help forum में जाकर देख सकते हो। अगर आप ये देखना चाहते हो तो उसके लिए यहाँ पर click कीजिए Click hare.

1. User – agent: Media partners – Google

यह एक google adsense robot है अगर आप अपने blog में adsense के code use करते हो तो आप इसको use कर के search engine से अपने code छिपा सकते हो अगर adsense use नहीं करते है तो आपके लिए ये कोई जरुरी नहीं हैं।

2. User – agent:

यह आपकी website के सभी users के लिए है उन्हें आपकी website में क्या क्या देखना चाहिए और क्या नहीं तो इसे dish allow ही रहने दीजिए ताकि हमारे blog की security बनी रहे।

3. Disallow: /search

यह code आपकी website के keyboards के लिए है इसे हमे अपनी website के लिए not allow करना चाहिए ताकि search engine इसे ना दिखा सके। आप चाहे तब यहाँ अपनी website के किसी page, post या keyboard का URL यहाँ डाल के sdish allow कर सकते है जैसे :- https://www.supportmeindia.com/label/blogger

4. Allow:

यहाँ पर आप search engine को क्या क्या show करना है वो सैट कर सकते है अगर आप इसे सभी पर allow रहने दे तो ही अच्छा रहेगा।

5. Sitemap 

ये सबसे important है sitemap search engine को हमारी website की new post की जानकारी देता है उसे कब क्या search करना है कौनसी post में कितने URL है कौनसी सबसे popular है और भी बहुत काम है sitemap के दोस्तों blog में robot. txt file add करने से पहले आपको अपने blog के लिए sitemap बनना होगा। आप यहाँ पर click कर के पहले अपने blog के लिए sitemap बना सकते हैं। अपनी Website (Blog) के लिए Google Sitemap कैसे बनाए ?

User-agent: Mediapartners-Google
 Disallow:
 User-agent:
 Disallow: /search
 Allow: /
 Sitemap: https://www.supportmeindia.com/sitemap.xml

इस code को copy कर लीजिए copy करने से पहले इसमें https://www.supportmeindia.com//sitemap.example की जगह खुद की website का sitemap add कर लीजिए।

Robots.txt File को Blog में कैसे Add करें?

Step 1:

1. सबसे पहले blogger.com website पर जाइए।

Crawl and indexing

  1. अब Blog की settings में जाइए।
  2. Search preferences पर click कीजिए।
  3. अब Custom Robots.text के सामने edit पर click कीजिए।

Step 2:

Custom robot.txt

  1. Yes पर tick कर दीजिए।
  2. यहाँ ऊपर दिया गया code paste कर दीजिए।
  3. अब आपको Save changes पर click करना हैं।

अब आपके blog में robots.txt file add हो चुकी है आप कोई भी search engine जो आपको robot.txt file allow करेगा वही दिखाएगा।

Note :- अगर आप अपने blog में से कोई चीज publish नहीं करना चाहते है तो ही इस robots.txt file को अपने blog में add करें। अगर आपको कोई page, post keyboard, label search engine से नहीं छिपाना है तो आप अपने blog में robot.txt add ना करें।

आपको robot.txt file से related कोई सवाल पूछना है तो comment में पूछ सकते हो।

उम्मीद है आपको ये post अच्छी लगी होगी अगर हाँ तो हमारी website की और भी post पढ़िए और हमारी post को अपने सभी friends के साथ social media पर शेयर भी कीजिए।

Reader Interactions

Comments (119)

  1. sir mujhe apni blog ki privacy policy or write with us or advertise with us jase page google search me show ni hone dena chahta hua to mai kaise robot.txt file ka use kru. kis me link Disallow: kru or kis me allow kru

    • Bahut hi simple hai robots.txt file me ye code add karo. Isi tarh aap kei link add kar sakte ho.
      Disallow: /your-page-link

  2. Bahut badiya apne samjaya hai

  3. bhai kya site ke leye Robot.txt add karna jaruri hai

    • Yes jaruri files ko search engine se hide karne ke liye jaruri hai.

  4. Sir,maine ekk site banaya hai per mee jab vee useee google me search ker rha huu to website new post kiya hua post ka titke dikha rha hee per Discription nahi dikha rha hee bol rha hee title kee niche ke “A description for this site is not available because of the site’s robot.txt.

    Aur Main Title mee “Your Description here” bta rha hee home page wla mee.Please help me sir!

    • maine blogger seo ke bare me complete guide di huyi hai wo post padh kar apen blog ki seo settings karo.

  5. sir mene search console me crawl ke ander jo robots.txt tester aata hai usme bahut sari post test ki thi to kya ab meri vo post search enggine me show nahi hogi please reply

    or agar nahi hogi to iska solution bhi batana please sir
    me bahut dino se soch raha tha meri post abhi tak show kyu nahi ho rahi

    • Aap robots.txt feature ko disable kar do sabhi post google me show hogi.

  6. bi mare site google me blank dika raha hai app dako to kia problem hai,or mari site google search conaole mai add karne mi eror dikata hai ki

    • Aap mujhe screenshot dikhao

  7. Ek baat batao brother tumhari site par tumhare blog post hi powered by google (Google ads) me show hote hain and then unko click karne par tumhare blog posts hi open hote hain, how is that possible? and do you get any income from that too?
    Reply must

      • Thanks for your quick response, i am amazed how quickly you give response to each of the comments.

  8. sir mene search console me jab site map add kia to mujhe ye msg show kar raha hai “Submited 63 indexed 44” Aap mujhe Samja Sakte hain ke 44 hi index kyun hwe hain ?

    • Iska matlab hai ki google me aapki site ke 63 ur lsubmit ho chuke hai or unme se 44 indexed hai.

  9. Sir kya ap Robot.txt file use karte hain?

    • Ha karta hu. Sabhi blogger karte hai.

  10. Sir cPanel kya hota hai mere paas godaddy ki hosting hai lekin cPanel.me login keise kru btaye

    • Aap godaddy customer care me bat karo wo aapko sabkuch samajha denge.

  11. BAhi mere blog me ye wrning aayi hai
    Warning! Use with caution. Incorrect use of these features can result in your blog being ignored by search engines.
    Mai kya karu plz bahi help me

    • Aapko jab robots.txt file ki puri jankari ho jaye tabhi ise use karna warna aapki site search engine se hide bhi ho sakti hai.

  12. bhai mai to koi ads nahi use kar raha hu to maine robot txt code ko add kiya hai kaya in se koi nuksan hoga to mai in ko removed kar du

    • jab tak aap robots.txt code ke bare me jan na lo use mat karo.

      • to kaya maine robot text code ko add kiya hai in ko removed kar du ? in ko remov kaise karte hai ?

        • Is post se jo code btaye gaye hai sirf unko rahne do baki ko remove kar do.

  13. aap mera blog chek,karke btaye,ki usme AdSense ke shi jagah lagaye h post main bhi or kitani ads. or laga skte h.

    main apni site ko alexa main submit karta hu to Vha paid service bta rha koi free service nhi aa rhi h.
    kaise add alexa main site ko free main.
    please help.

  14. sir yaha apne custom robot .txt code ko peste krne ke liye bataya hai. but apke post me jo photo diya huwa usme to custom page not found me code peste krte huwe dikhaya hai.. isme thoda cnfuse hun,,, aap btayenge code kaha pe dale,, custom page not found me ya custom robot txt me,,

    • Woimage galat thi ab maine chnage kar di hai aap follow kar sakte ho.

  15. ager robot txt block ho jaye to ushe kese unblock karte hai pliz btaye me aap ke jwab ka intjaar krunga

    • Apne jo robots.txt code add kiya hai. use remove kar do.

  16. WordPress me robot text kese add kre

    • ye post padho how to use robot.txt file in WordPress

  17. agar ham apne blog me robot txt add kr le to Jo hamari post hai bo search engine me chhipegi to nhi

    • Aap jo jo robot.txt file chipaoge wo sab search engine me show nahi hogi. Mere hisab se aapko jab tak robot.txt ki achi jankari na ho, ise use mat karo.

  18. Does your blog have a contact page? I’m having problems locating it but, I’d like to shoot you an email. I’ve got some creative ideas for your blog you might be interested in hearing. Either way, great website and I look forward to seeing it improve over time.

  19. I have learn a few good stuff here. Certainly value bookmarking for revisiting. I surprise how much effort you place to make the sort of wonderful informative website.

  20. Hi my name is Sandra and I just wanted to drop you a quick note here instead of calling you. I came to your Robot.txt File Blog Me Kaise Add Karte Hai page and noticed you could have a lot more hits. I have found that the key to running a successful website is making sure the visitors you are getting are interested in your niche. There is a company that you can get targeted traffic from and they let you try their service for free for 7 days. I managed to get over 300 targeted visitors to day to my website.