কি ভাবে Blog এ Custom Robots Txt File Add করবেন?How to Add custom robots txt file ?

এর আগে আমি দেখিয়ে ছিলাম কিভাবে custom Robots header tag setup করতে হয়।
আজ, আমি খুব দরকারী বিষয়ে আলোচনা করতে যাচ্ছি Blogger এর জন্য ।

ব্লগারে এটি কাস্টম রোবটস টেক্টস নামে পরিচিত,  আপনি আপনার পছন্দ অনুসারে এই ফাইলটি কাস্টমাইজ করতে পারেন।

আজকের টিউটোরিয়ালে আমি গভীরভাবে এই শব্দটি আলোচনা করব এবং এর ব্যবহার এবং সুবিধা সম্পর্কে জানানোর চেষ্টা করবো।

Robots.txt  কি?

Robots.txt একটি টেক্সট ফাইল যা সহজ একটা  কোড  যা কয়েক লাইনে রয়েছে।

এটি ওয়েবসাইট বা ব্লগের সার্ভারে সংরক্ষিত যা অনুসন্ধান ফলাফলগুলিতে আপনার ব্লগকে কিভাবে সূচী এবং ক্রল করবেন তা ওয়েব ক্রলারকে নির্দেশ করে।

এর অর্থ হল আপনি ওয়েব ক্রলার থেকে আপনার ব্লগে যে কোনও ওয়েব পৃষ্ঠাটি সীমাবদ্ধ করতে পারেন ।

সবসময়ে যে কোনও ওয়েব পৃষ্ঠা ক্রল করার আগে অনুসন্ধান ক্রলাররা robots.txt ফাইল স্ক্যান করে।

Robots Txt File দেখতে কেমন হয়??

Robot txt file দেখতে ঠিক এইরকম হয়।

""User-agent: Mediapartners-Google

Disallow:

User-agent: *

Disallow: /search

Allow: /

Sitemap: http://example.blogspot.com/feeds/posts/default?orderby=UPDATED""

কি ভাবে Robot txt file Add করবেন আপনার Blog এ ??

এটাই ছিল আজকের টিউটোরিয়াল ।তো দেখে নি কিভাবে Add করবো

1.  Go to your blogger blog.

2.  Navigate to Settings >> Search Preferences ›› Crawlers and indexing ›› Custom robots.txt ›› Edit ›› Yes

3 . Now paste your robots.txt file code in the box

4.  Click on Save Changes button

5.  You are done! 

নিচের এই Coad টি Copy করুন এবং আপনার Blog এর Custom robots txt file এর box এ Paste করুন।

User-agent: *
Disallow: /search

Allow: /

Sitemap: https://technorana360.blogspot.com/feeds/posts/default?orderby=UPDATED

NOTE:: (1) technorana360.blogspot.com এর জায়গায় আপনি আপনার সাইট এর Link টা দিন ।
(2) এখানে থাকা Sitemap টি শুধুমাত্র আপনার Blog এ যদি 25 টা post থাকে বা তার নিচে হয়ে থাকে তাহলে ।
যদি  25 এর বেশি হয়ে থাকে তাহলে sitemap টি একটু change করুন ।

500 টার নিচে যদি post হয়ে থাকে তাহলে sitemap দিন 

https://example.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500

টিউটোরিয়াল টি পরার জন্য ধন্যবাদ ।যদি আপনার কিছু Problem হয় এটা Setting করতে বা কিছু জিজ্ঞেস করার থাকে তাহলে কমেন্ট করুন । যদি টিউটোরিয়াল টা ভালো লেগে থাকে তাহলে Please আপনি এটা শেয়ার করুন ।
__________________________________________________________________________________________