Support Me India

Robots.txt File Ko Blog Me Kaise Add Kare – Step by Step Full Guide

by: ,

आज मैं आपको बताने जा रहा हूँ की blog में robots.txt code कैसे use करते है। आपने पहले भी इसे try तो किया होगा but error आता होगा तो चलिए आज हम इसे सही तरीके से add करना सीख लेते है अगर आप चाहते है की आपकी blogging के साथ साथ गोपिनियता भी बनी रहे तो robots.txt add करना बेहतर होगा।

robots.txt file

Robots.txt एक file है blogger ने इसे blog में इसलिए add किया है ताकि हम इसकी help से कुछ प्राइवेट बाते google जैसे search engine से छिपा सके। ये blog की हर post हर page में होता है आप चाहे जिसे google, bing, yahoo जैसे search engine से छिपा सकते हैं।

Robots.txt कैसे काम करता हैं?

थोड़ी देर के लिए मान लीजिए robots.txt आपकी website का bodyguard है अब जब भी कोई users हमारी website से related कोई topic किसी search engine में search करता है तो search engine हमारी website पर आता है तो आपकी website का bodyguard यानी robot.txt उसे बताता है की उसे इस website पर क्या क्या दिखाना allow है। तो दोस्तों इस तरह robots.txt file हमारी website की privacy की security करता हैं।

अपने Blog के लिए Robots.txt File कैसे बनाए?

वैसे तो कई websites है blog के लिए robot.txt file बनाने वाली but अगर वो true होती तो थोड़ी देर के लिए सोचो blogger ने आज तक ये service start नहीं की हैं। मैं आपको इतना ही कहना चाहूँगा की आपको कही जाने की आवश्यकता नहीं है। यहाँ आज मैं आपको robots.txt file के वो code दे रहा हूँ जो blogger के बताए हुए हैं आप चाहे तो इसे blogger help forum में जाकर देख सकते हो। अगर आप ये देखना चाहते हो तो उसके लिए यहाँ पर click कीजिए Click hare.

1. User – agent: Media partners – Google

यह एक google adsense robot है अगर आप अपने blog में adsense के code use करते हो तो आप इसको use कर के search engine से अपने code छिपा सकते हो अगर adsense use नहीं करते है तो आपके लिए ये कोई जरुरी नहीं हैं।

2. User – agent:

यह आपकी website के सभी users के लिए है उन्हें आपकी website में क्या क्या देखना चाहिए और क्या नहीं तो इसे dish allow ही रहने दीजिए ताकि हमारे blog की security बनी रहे।

3. Disallow: /search

यह code आपकी website के keyboards के लिए है इसे हमे अपनी website के लिए not allow करना चाहिए ताकि search engine इसे ना दिखा सके। आप चाहे तब यहाँ अपनी website के किसी page, post या keyboard का URL यहाँ डाल के sdish allow कर सकते है जैसे :- https://www.supportmeindia.com/label/blogger

4. Allow:

यहाँ पर आप search engine को क्या क्या show करना है वो सैट कर सकते है अगर आप इसे सभी पर allow रहने दे तो ही अच्छा रहेगा।

5. Sitemap 

ये सबसे important है sitemap search engine को हमारी website की new post की जानकारी देता है उसे कब क्या search करना है कौनसी post में कितने URL है कौनसी सबसे popular है और भी बहुत काम है sitemap के दोस्तों blog में robot. txt file add करने से पहले आपको अपने blog के लिए sitemap बनना होगा। आप यहाँ पर click कर के पहले अपने blog के लिए sitemap बना सकते हैं। अपनी Website (Blog) के लिए Google Sitemap कैसे बनाए ?

User-agent: Mediapartners-Google
 Disallow:
 User-agent:
 Disallow: /search
 Allow: /
 Sitemap: https://www.supportmeindia.com/sitemap.xml

इस code को copy कर लीजिए copy करने से पहले इसमें https://www.supportmeindia.com//sitemap.example की जगह खुद की website का sitemap add कर लीजिए।

Robots.txt File को Blog में कैसे Add करें?

Step 1:

1. सबसे पहले blogger.com website पर जाइए।

Crawl and indexing

  1. अब Blog की settings में जाइए।
  2. Search preferences पर click कीजिए।
  3. अब Custom Robots.text के सामने edit पर click कीजिए।

Step 2:

Custom robot.txt

  1. Yes पर tick कर दीजिए।
  2. यहाँ ऊपर दिया गया code paste कर दीजिए।
  3. अब आपको Save changes पर click करना हैं।

अब आपके blog में robots.txt file add हो चुकी है आप कोई भी search engine जो आपको robot.txt file allow करेगा वही दिखाएगा।

Note :- अगर आप अपने blog में से कोई चीज publish नहीं करना चाहते है तो ही इस robots.txt file को अपने blog में add करें। अगर आपको कोई page, post keyboard, label search engine से नहीं छिपाना है तो आप अपने blog में robot.txt add ना करें।

आपको robot.txt file से related कोई सवाल पूछना है तो comment में पूछ सकते हो।

उम्मीद है आपको ये post अच्छी लगी होगी अगर हाँ तो हमारी website की और भी post पढ़िए और हमारी post को अपने सभी friends के साथ social media पर शेयर भी कीजिए।

Related Posts for You

Reader Interactions

Comments (119)

  1. Sir, Meri site me Robot.txt Disabled hai, i mean me iske bare me thik se nhi janta to islie mene ise disable hi rakha hai, But abhi bhi 10 ese page hai jo blocked by robot.txt hai,,, to sir esa Kyu hai.. kyonki me is error ko solve nhi kar pa raha hu… So please reply me ASAP

    • Aap first robots.txt ko achhe se samajh lo uske bad edit karo

  2. Sir aapke blog ke head par jo ad show ho raha hai uski size mobile theme me alag hai or desktop me alag hai. Sir blog me responsive ad kaise lagaye.

    • Main responsive ad use karta hu.

  3. why not.

    • Agar mai robot.txt me kuch na likhi but use yes kar du to koi problems hogi ki nhi..sir

      • No problem.

  4. Jumedeen bhai maine new domain add kiya hai magar dono site me jab concole me sitemap add karta hu to robot txt file error show ho raha hai please solution jumedeen bhai

    • Robots.txt file me sahi code use karo ya use hi mat karo.

  5. sir mere blog ke search console me robot.txt tester me

    ” user- agent : ”

    me error bata raha hai

    • Ye code use karo
      User-agent: *

      • thanks sir ye to sach me kaam kar gayi

  6. Thank you for sharing this information. This information is very helpful for me. I hope that you share daily new information on blogging.

  7. sir maire blog me search console se robots.txt submit ho gya use hatane ke liye kya krna hoga.

    • blog se remove karo search console se bhi remove ho jayega.

  8. Sir maine 2 month phle ek blog bnaya tha or ab naine uska URL change kiya h to phle wale URL se bhi vo blog google pr show ho rha hai us phle wale blog ko google se hatane ke liye kya kru.

    • Kuch mat karo apne aap remove ho jayega.

  9. Sir mene new blog bnaya he kuch din pehle me blog ke bare me kuch ni janta aur jab me apna blog google pe search karta hu toh pehle number pe robot.Txt name se kuch aata he aur niche mera link dikhata he esa kyu help me

    • Aap robots.txt file use mat karo, jab aapko iski jankari ho jaye ta use karna.

  10. Sir hame apne blog ke sabhi contents show karna chahte hain. To kya ham aisa robot text daal sakte hain ?

    User-agent: *
    Allow: /
    Sitemap: http://www.website.com/sitemap.xml

    Kya ye robot text sahi hai ?

    • Yes ye sahi hai.

  11. महत्वपूर्ण जानकारी, दिया आपने
    Thanks

  12. hi bhai
    1)robots txt karne se pahle sitemap banana honga
    2)robots txt me mujhe allow sirf sitemap all post rakhni hai aur kya allow karu aap bata sakte hai pls
    3)mere blog par 5 post hai aur 2,3post likh kar main sitemap aur robots txt banauga, search engine me submit karu to achha rahenga ya aur post likhu
    4)mere blog ko opera mobile browser me open karo to 1,2 letter cut jaate hai kya problem (ribbon template) other browser me koi problem nahi.
    5)guest post likh kar dofollow backlink milti hai
    6)blog par number if post (5,10 posts) ek page par kaise kare

    • 1. Not require
      2. Learn more about robots.txt
      3. Jab chaho kar sakte ho.
      4. fully responsive template use karo.
      5. yes
      6. Blogger settings >> Posts, comments and sharing par jao or Show at most ke samne jitni post set karni hai utne number set karo.

  13. sir mughe apne blog ka ek post ko delete karna hai lekin vo blogger me se delete kardi hai lekin google me show ho rahi hai kya karna chahiye iska koi solution hai jissse vo hamesha ke liye google par se hat jaye

    • Aap search console par jao or google index >> remove url se us post ko remove karo.

  14. sir ji maine ptc website releted ek post 8 month pahle banayi yhi, 1 month pahle maine usko edit karke update kiya tha, tab maine uska link bhi change kiya tha ab problem ye ho raha hai ki search engine me dono post show ho rahe hai , update kiya hua post hi show hone ke liye muze kya karna hoga plz help

    • New post ko search console me fetch as google karo.

  15. Sir
    Jab me apni post ko search karta hun to bo search me show hoti hai. Par jab me apni post ko open karta hun to bo post show nhi hoti iski jagah par home page show hota hai plz btaye kya setting kare

    • Aap post ka link change mat kiya kaor galat link se psot index hone mar error show hota hai.

  16. bhai aapka jo code hai woh copy nahi ho raha hai copy dissalw kiya hai kya aapne

    • Ab check karo ho jayega.

    • Google ko aapke robots.txt file ko update karne me time lageg. E jaruri bat google bahut smart hai or humare block kar lene ke bad bhi URL index kar leta hai.

  18. Sir agar main robot.text use nahi karta hun to koi prblm h kya ? Aur sir mere comment ke jawab ka mujhe notification mil jaye aisa nahi ho sakta kya ?

    • Starting me iski jarurat nahi jab aapke blog par lakho me traffic ho to jarurat hogi. Aap ise achhe se samajh lo tab use karna.

  19. sir hm site migrate kiye h tb se comment karne ka option nahi aa raha b short me option bata sakte h

    • WordPress dashboard >> settings >> discussion par jao or “Allow link notifications from other blogs (pingbacks and trackbacks) on new articles” or “Allow people to post comments on new articles” ke samne tick karo.

  20. Sir robot txt set karne ke baad usme hum kuch hide karana chahte hai to kaise kar sakte hai. i mean hidi khud ho jaayegi ya hume karni padegi

    • Disallow likh kar uske bad jo hide karna hai us page ka link add karo.