Robot.txt file क्या है और ये SEO क्यों जरुरी है

1

Robot.txt File क्या है, ब्लॉग में कैसे ऐड करते हैं (What is Robot.txt File in Hindi), (SEO, Generator, Checker, Blogger, WordPress, Use)

क्या आपके Blog Post का Crawl और Index वैसे नहीं हो पा रहा है जैसे आप चाहते हो? क्या आप जानते है कि Robots.txt File क्या है? Robots.txt File के क्या फायदे है? Robot.txt file को Blogger और WordPress में कैसे add करते है? अक्सर new Bloggers को Robots.txt File के बारे में ठीक से पता न होने कारण काफी सारी Problems होती है|

NP Digital के Co founder Nell Patel के अनुसार, Robots.txt File file Internet पर उपलब्ध सभी Website के Post का एक छोटा सा Text File है| Robots.txt File को खासकर Search Engine और SEO के लिए बनाया जाता है|Robots.txt File आपकी Post Rank करने में बहुत help करता है|लेकिन फिर भी बहुत से Bloggers इसकी Value नहीं समझते है| कही आप भी उनमे से एक तो नहीं! अगर हाँ, ये आपकी Website के लिए ठीक नहीं है|

अगर आप चाहते है की आपकी Website भी दूसरे Bloggers की तरह Search engine में अच्छे से Rank करें तो आपको मेरे इस Article में Robots.txt File से Related सभी जानकारी मिल जाएगी कि Robots.txt File kya hai, Robot.txt file SEO के लिए क्यों जरुरी है|

ये Article आपके लिए बहुत Useful होने वाला है इसलिए इसके एक भी Point को miss मत करना तो चलिए सबसे पहले Start करते है की Robots.txt File kya hai ( Robots.txt File Meaning In Hindi)‌

robot.txt file in hindi

Robot.txt File क्या है?

Robots.txt File को robots exclusion protocol भी कहा जाया है| Robots.txt File एक text file के रूप में जाना जाता है| Robots.txt File Google के Web Robots को ये बताते है की आपके Post में क्या Crawl करने लायक है और क्या नहीं| Robots.txt File आपके द्वारा दिए गए कमांड को Search Engine तक भेज देता है|

बहुत से Bloggers ऐसे है जिनको अभी तक ठीक से पता ही नहीं है की Robots.txt File kya hota hai| Robots.txt File के नाम से ही अनुमान लग रहा होगा कि यह Text File का एक एक्सटेंशन है जिसमें आप केवल टेक्स्ट ही लिख सकते हैं|

दूसरे शब्दों में कहा जाये तो अगर आप अपने Blog से किसी Page को Search Engine में दिखाना चाहते हैं या फिर आप यह चाहते हैं कि आपका Page search engine में ना दिखे तो ऐसे में आप यह सब चीजें Robots.txt File में दें|

इस प्रकार बाद में फिर जब search engine जैसे Google, Bing या Yahoo आपके Post को Index करना आरंभ करेगा तो ऐसे मेंsearch engine के पास Robot.txt File की ओर से एक निर्देश जाएगा|जिसमें यह message होगा कि उस Blog की कौन सी चीजों को Index करना है और कौन सी को नहीं|

इससे सबसे बड़ा फायदा ये होगा की आपका Blog Post SEO Friendly बन जाता है| जिससे Search engine आसानी के साथ यह समझ जाता है कि उसको कौन सा part index करना है और कौन सा नहीं करना है|

Robots.txt file SEO के लिए क्यों जरुरी है?

अभी आपने ये जाना की Robots.txt File क्या है| अब समझते है Robots.txt File SEO के लिए क्यों जरुरी है| Robots.txt File Technical SEO में बहुत important role निभाता है| अपने Post का SEO करते time आपको इस बात का ध्यान रखना चाहिए की उसमे आप Robots.txt File जरूर add करे|

क्योकि जब आप अपने Post के Sitemap को Google search console में एक बार submit कर देते है तब Google के Bots आपके Post पर आते है और अगर उन्हें वहाँ Robots.txt File नहीं मिलता तो उस situation में वे आपके पूरे Post के content को crawl और index करना start कर देते है|

इसमें वे भी content index हो जाते है जो आप नहीं चाहते थे की वे हो | इस प्रकिया में SEO पर अच्छा impact नहीं पड़ता है| Google के Crawlers instruction के साथ content की indexing करें इसलिए Robots.txt File का उपयोग किया जाता है|

Robots.txt File के क्या फायदे है?

अब आपने ये तो समझ लिया की Robots.txt File kya hai, Robots.txt File SEO के लिए क्यों important है| अब जानते है कि Robots.txt File के फायदे क्या क्या है|

1. Robots.txt File Website के किसी भी section को Private कर देता है|
2. Robots.txt File के जरिये किसी भी Website के Low quality Page को block किया जा सकता है|
3. Robots.txt File किसी भी बेकार SEO वाले Website को improve करने में बहुत काम में आता है|
4. Robots.txt File search engine Bots को proper way में Content को crawl और index करने का instruction देता है|
5. Robots.txt File search engine Bots को बताता है की Content के किस part को crawl करें और किस part को नहीं|

Robots.txt File से जुड़ी महत्वपूर्ण चीजें

अब मै आपको Robots.txt File से जुडी कुछ महत्वपूर्ण चीजों के बारे में बताता हूँ जोकि Robots.txt File में प्रयोग किए जाते हैं|

Buy Hostinger Hosting and Free SSL

Additonal discount code:- SEOPAVAN

  • अलाउ (Allow) – जब आप अपनी Text file के अंदर किसी चीज को अलाउ (Allow) करेंगे तो इसका यह मतलब है कि आप उस पार्ट को सर्च इंजन में दिखाना चाहते हैं|
  • डिसएलाऊ (disallow) – यदि आप अपने किसी Post को disallow करते हैं तो इसका यह मतलब है कि आप उसको search engine में दिखाना नहीं चाहते|
  • यूजर एजेंट (user agent) – इसकी सहायता से आप अपने Blog पर आने वाले लोगों को आप वह सब दिखा सकते हैं जो आप उन्हें दिखाना चाहते हैं| जैसे- Image का source या फिर फाइल कहां save की है आदि|
  • यूजर एजेंट मीडिया पार्टनर्स गूगल (user agent : Media Partners Google) – आप इसका प्रयोग करके अपने Adsense code को visitors से छिपा सकते हैं| लेकिन आपको बता दें कि अगर आप इसको disallow करेंगे, तो फिर Google Adsense आपके Blog या Page पर Ads बिल्कुल भी नहीं दिखा सकेगा| बेहतर यही होगा कि इसे allow ही रखें|

Blogger में Robots.txt File कैसे Add करें?

ब्लॉगर में हुए New अपडेट की वजह से Robots.txt File add करने का तरीका change हो गया है इसमें पहले आपको Settings में जाना होगा फिर वहाँ पर Settings में Custom enable robots.txt को allow करना होगा|

Blogger me Robots.txt kese add kare

जब भी आप अपनी ब्लॉग को SEO Friendly बनाना चाहते हैं तो उस समय Robot.txt File का इस्तेमाल किया जाता है| लेकिन अधिकतर लोग इसे ऐसे ही छोड़ देते हैं| मगर Blogger आपके Post के लिए एक बेस्ट Robot.txt File क्रिएट कर देता है|

लेकिन यहां आपको बता दें कि अगर आपने अपने ब्लॉग को ब्लॉगस्पॉट (blog spot) से वर्डप्रेस पर माइग्रेट किया है तो ऐसे में आपको इस फीचर का इस्तेमाल अवश्य करना चाहिए|

इस प्रकार आप बहुत आसानी के साथ अपने ब्लॉगर में Robot.txt File को आसानी के साथ प्रयोग कर सकते हैं| वैसे मै आपको यही राय देंगे कि आप Blogger पर इस फीचर का प्रयोग ना ही करें तो ही आपके लिए बेहतर रहेगा| और आप अगर आपकी वेबसाइट वर्डप्रेस पर है तब इस फीचर का इस्तेमाल जरूर करें|

WordPres में Robots.txt File कैसे Add करें?

  • अगर आप WordPress का प्रयोग करते हैं तो आप योस्ट एसईओ (Yoast SEO) के बारे में अवश्य ही जानते होंगे और आपने उसे Install भी किया हुआ होगा|
  • Robots.txt File को add करने के लिए आप अपनी वेबसाइट के Yoast SEO में जाएं और tools पर क्लिक करके file editor का बटन दबाएं|
  • अब आप यहां अपनी वेबसाइट के Sitemap को कॉपी करके Paste कर दें और फिर Save Changing to Robots text बटन दबा दें|बस फिर आपका Robots.txt File WordPress से add हो जायेगा|

Robot.txt File कुछ अन्य जानकारी

फ़ाइल का नाम Robot.txt File
कहां प्रयोग करते हैं वेबसाइट में
किस लिए प्रयोग करते हैं सर्च इंजनों को कमांड देने के लिए
इसको ऐड कैसे करते हैं वर्डप्रेस योस्ट एसीओ के द्वारा और ब्लॉगस्पोट में गूगल खुद कर लेता है.

FAQ

Q : Robot.txt File का क्या काम होता है ?

Ans : सर्च इंजनों को कमांड देने का.  

Q : किसी वेबसाइट में Robot.txt File कहां मौजूद रहती है ?

Ans : वेबसाइट के रूट फोल्डर में|

Q : क्या ब्लॉग या वेबसाइट के लिए Robot.txt File का उपयोग आवश्यक होता है ?

Ans : जी हां|

Q : यदि Robot.txt Fileका प्रयोग ना किया जाए तो तब क्या होगा ?

Ans : ऐसे में सर्च इंजन सभी चीजों को इंडेक्स कर सकता है|

Q : Robot.txt File में यूज़ करना चाहिए या वर्डप्रेस में ?

Ans : वर्डप्रेस में|

Other Links –

Buy Hostinger Hosting and Free SSL

Additonal discount code:- SEOPAVAN

1 COMMENT

LEAVE A REPLY

Please enter your comment!
Please enter your name here