आज मे आपको Robots.txt File Kya Hai इसके बारे में बताने वाला हु अगर आपको Robots.txt File Kya Hota Hai इसके बारे में जानना है तो यह आर्टिकल पुरा पढे Robots.txt File आपकी Blog Website के लिए बहुत जरूरी है।
robot.txt file एक robot की तरह होता है जो हमारे कमांड को फोलो करता है और काम करता है वैसे ही robot.txt file हम जो कमांड देते वो search engine को कमांड भेज देता है और search engine आपके blog में जो भी update हुआ है उसको अपने सर्वर पर index करता है और लोगो तक पहुंचा ता है।
Robots.txt File का सीधा संपर्क आपके blog की indexing और crawl rate से जुड़ा है तो चलिए जानते है की Robot.txt File क्या है और इसको अपने Blog में कैसे Use करते है
अनुक्रम
- 1 Robots.txt File Kya Hai
- 2 Robots.txt File क्यो जरूरी है
- 3 Robots.txt File को Use करने के क्या फायदे हैं
- 4 Robots.txt File Kaise Banaye
- 5 Blogger Me Robots.txt File Kaise Add Kare
- 6 अपनी Website का Robots.txt File कैसे Check करे Google में?
- 7 Robots.txt File द्वारा Website के कोन कोन से Page को Noindex करना चाहिए
- 8 Robots Txt File Kya Hai
Robots.txt File Kya Hai
Robots.txt File एक ऐसी File जिसको हम अपने Blog में Add करते है तो हम इसकी मदद जो भी प्रायवेट बाते है google, yahoo, bing जैसे Search engine से छिपा सकते है। Robot.txt File के अन्दर हम जो भी कमांड लिखते है उसके बाद जब भी कोई search engine आपके Blog पे आएगा Post को index करने के लिए तो उसको एक कमांड जाएगा की आप इस blog website इस सब चीजों को index करो और इन सब चीजों को index ना करो। Robots.txt File आपकी हर एक post और page में होता है और Robots.txt File आपकी blog की जोभी प्रायवेट बाते है उसका Google, Yahoo, Bing जैसे Search Engine से छिपा ता है और इन सभी Search Engine को बताता है की कोनसा पार्ट index करे और कोनसा नहीं.
Robots.txt File क्यो जरूरी है
अगर आप Robots.txt File अपनी वेबसाइट में नहीं Add करते हैं तो जब भी Search Engine आपके Blog पर Indexing के लिए आएगा तो वो आपके सभी Content और Page को Index कर लेगा और इससे आप जो चीज Google Search में नहीं दिखाना चाहते है वो भी दिखने लगेगा लेकिन
अगर आप Robots.txt File अपनी वेबसाइट में लगाते हैं तो जब भी Search Engine आपकी Website पर आएगा तो वो आपके Robots.txt File में लिखे गए Text को Follow करके ही Indexing करना सुरु करेगा और इससे आप जो नहीं दिखाना चाहते वो Google Search में नहीं दिखेगा
Robots.txt File को Use करने के क्या फायदे हैं
- आप इसके द्वारा Search Engine को बता सकते है कि वो आपकी Website में से इन सभी चीजों को Index करे और इन सभी चीजों को Index न करें
- आप अपने Website के Duplicate File और Page को Noindex करा सकते है
- आप इसके द्वारा Category, Author Page और Comments को Noindex करा सकते है
- आप इसके द्वारा अपनी Website मे दिए गए Video या Image को Noindex करा सकते है
- आप इसमें Sitemap को Add करके अपनी पोस्ट को जल्द Search Engine में Index करा सकते है
- आप अपनी Website को Secure कर सकते है
- आप इसके द्वारा Low Quality Post को भी Block कराके अपनी Website का SEO कर सकते है
Robots.txt File Kaise Banaye
वैसे तो Robots.txt File बनाने वाली कई सारी वेबसाइट इन्टरनेट पर मोजुद है लेकिन आपको Robots.txt File बनाने के लिए internet पर जाके robot.txt बनाने वाली website ढुढने की कोई कोई जरूरत नहीं क्युकी में आपको आज यहां पर वो robots.txt file के वो code देने वाला हु जो Blogger ने बताए हुए हैं और आप Blogger help forum में जाकर देख सकते हो। अगर आप ये देखना चाहते हो तो उसके लिए यहाँ पर click कीजिए
आपको नीचे दिए गए robot.txt file के Code को पहले समझ ते है
User-agent: Mediapartners-Google
Disallow:
User-agent:
Disallow: /search
Allow: /
Sitemap: https://www.hindiuser.com/sitemap.xml
1. User – agent: Mediapartners – Google : इसकी मदद से आप Google AdSense Code को User से छिपा सकते है और अगर आप Google AdSense Use नहीं करते है तो यह Code आपके लिए उपयोगी नहीं है
2. User – agent : इस को Use करके आप अपनी Website में User को जो दिखाना चाहते है वो दिखा सकते है और जो दिखाना नहीं चाहते वो नहीं दिखा सकते है आप इसको हमेशा Disallow ही रहने दीजिए क्युकी यह आपके Website की Security के लिए बहुत जरूरी है
3. Disallow: /search : अगर आप अपनी website के keyword को नहीं दिखा चाहते है तो आप इसको हमेशा Disallow ही रहने दे और आप जो भी Post को Google में नहीं दिखाना चाहते उसकी URL को यहां Paste करके उसको Disallow कर सकते है
4. Allow : यहां पर आप User को जो दिखाना चाहते वो दिखा सकते है और आप हमेशा इसको allow ही रहने दे
5. Sitemap : Sitemap आपके Blog के लिए बहुत जरूरी है क्युकी Sitemap आपके Blog की New Post की जानकारी Search Engine को देता है और Sitemap इसक अलावा और भी बहुत कुछ काम करता है जैसे कि कोनसी Post Popular है, कीस Post में कीतनी Url है etc.
Blogger Me Robots.txt File Kaise Add Kare
Step 1:
सबसे पहले आपको blogger.com पर जाना है
- उसके बाद आपको Setting पर Click करना है
- अब आपको search preferences पर click करना है
- और उसके बाद आपको Custom robots.txt पर Click करना है
Step 2 :
- अब आप Yes पर Click करे
- अब आपके सामने एक Box Open होगा
- इसमें आपका नीचे दिया गया Code Copy करना है लेकिन code copy करने से पहले इसमें https://www.hindiuser.com/ की जगह खुद की website का URL add करना है
User-agent: Mediapartners-Google
Disallow:
User-agent:
Disallow: /search
Allow: /
Sitemap: https://www.hindiuser.com/sitemap.xml
- अब आपको इस Box में Code Paste करना है
- अब आपको Save Changes पर click करना हैं
- अब आपके blog में robots.txt file add हो चुकी है और कोई भी Search Engine में वही दिखेगा जो आपकी robot.txt file allow करेगा।
अपनी Website का Robots.txt File कैसे Check करे Google में?
आप Robots.txt File को Google में नीचे दिए गए तरीके से पता लगा सकते है
Step 1 : आपको Google में अपनी Website के URL के Last में robots.txt लिखकर Search करना है आप नीचे दिए Photo में भी देख सकते है
Search :- https://www.yourwebsite.com/robots.txt
Step 2 : Search करते ही आपकी Website की robots.txt File आ जाएगी आप Photo में देख सकते है
आप Blogger में Robots.txt File लगाने के लिए आप हमारा यह Video देख सकते है और Video पसंद आये तो चैनल को SUBSCRIBE जरुर करे
Robots.txt File द्वारा Website के कोन कोन से Page को Noindex करना चाहिए
आपको robots.txt File के द्वारा नीचे दिए गए सभी चीजों को जरूर Noindex करना चाहिए
- Category
- Comments
- Author
- Links
- Admin
आपको ऊपर दिए गए सभी चीजों को Noindex करना बहुत जरूरी है
आप इन सभी को Blogger में अच्छे Noindex नहीं करा सकते है लेकिन अगर आपकी Website WordPress पर है तो आप
आप यह सब Blogger में अचछे नहीं कर सकते है लेकिन आप अगर WordPress User है तो आप Yoast SEO Plugin के द्वारा यह सब Noindex करा सकते है
आप अपने ब्लोग को Google में Index कराने के लिए यह पढे :- Blog Ko Google Search Console Me Submit Kaise Kare
जरूर पढ़े :-
- Google AdSense Account को Approval कराने की Tricks
- Bloggers के लिए Best Free Top Keyword Research Tools
- SEO Friendly आर्टिकल कैसे लिखें
- On Page SEO क्या है और इससे वेबसाइट की ट्रैफिक कैसे बढ़ाये
- Blogger कि Post Me Code Box Kaise Add Kare
- Blogger Vs WordPress : Which is Better Platform In Hindi
- Blog और Website से पैसे केसे कमाए?
- Blogger के लिए Best Template Download करने की Top Websites
- Blogger Blog Ki Template Ko Change OR Upload Kaise Kare
- Blog Post के लिए Free Stock Image Download करने की Top Website
Robots Txt File Kya Hai
मुझे आशा है कि आपको Robots.txt File Kya Hai और Robots.txt File Kaise Banaye इसके बारे में जानकारी आपको हमारे आर्टिकल से मिल गई होगी
यदि आपके मन में कोई सवाल है तो Comment करके जरूर बताएं में उसका जवाब देने की पुरी कोशिश करुंगा और आपको हमारा यह पोस्ट केसा लगा यह भी Comment करके बताना मेरा आप लोगों से Request है कि
यदि आपको मेरा यह पोस्ट अच्छा लगा है और इससे आपको कुछ जानने को मिला है और लगता है यह जानकारी अन्य लोगों को भी मिलनी चाहिए है तो इसे आप Social Media पर जरुर Share कीजिये जिससे इसकी जानकारी और भी लोगों को और वो भी जान सके कि Blogger Me Robots.txt File Kaise Add Kare
Sir isse mera blog confirm index to jaayega?
Ha ho jayega
sir mera nahi ho rha hai kya karu
Bhai Kya Nahi Ho Raha Hai