Robots.txt জেনারেটর
সাইটম্যাপ URL দিন এবং প্রস্তুত robots.txt ব্লক কপি করুন। ফাইল সব user-agent-কে সব পথে অনুমতি দেয় এবং Sitemap লাইন যোগ করে।
আপডেট 2026-08-03 · seo
User-agent: *
Allow: /
Sitemap: https://example.com/sitemap-index.xml
এই টুল সম্পর্কে
একটি Sitemap URL ক্ষেত্র আউটপুট চালায়। টেক্সট সবসময় User-agent: * তারপর Allow: / তারপর খালি লাইন এবং Sitemap: আপনার URL। ইনপুট বদলালেই পূর্বরূপ আপডেট হয়।
কীভাবে ব্যবহার করবেন
- জেনারেটর খুলুন: পৃষ্ঠা লোড করুন যাতে Sitemap URL ক্ষেত্র দেখা যায়।
- সাইটম্যাপ URL দিন: আপনার sitemap বা sitemap-index URL পেস্ট করুন (নমুনা https://example.com/sitemap-index.xml)।
- robots.txt কপি করুন: User-agent, Allow ও Sitemapসহ ফলের ব্লক নির্বাচন করুন।
- ফাইল ডিপ্লয় করুন: সাইট রুটে robots.txt হিসেবে সংরক্ষণ করুন এবং HTTPS-এ লোড যাচাই করুন।
সাধারণ ব্যবহার
- সম্পূর্ণ ক্রলযোগ্য নতুন সাইটের জন্য robots.txt শুরু করুন।
- এক পেস্টে sitemap-index.xml বা sitemap.xml দেখান।
- পরে সূক্ষ্ম Disallow যোগের আগে হোস্টিংকে স্টার্টার ফাইল দিন।
টিপস
- সাইটম্যাপের জন্য পূর্ণ পরম URL (https://…) ব্যবহার করুন, আপেক্ষিক পথ নয়।
- এই স্টার্টার সব অনুমতি দেয়—গোপন এলাকা থাকলে কপির পর Disallow যোগ করুন।
প্রশ্নোত্তর
আউটপুটে কী নিয়ম?
User-agent: * এবং Allow: / প্লাস আপনার URLসহ Sitemap লাইন।
UI থেকে পথ ব্লক করা যায়?
না—এটি অনুমতিমূলক স্টার্টার; কপির পর Disallow সম্পাদনা করুন।
সাইটম্যাপ আগে থেকে থাকতে হবে?
টুল শুধু ফাইল ফরম্যাট করে; আসল সাইটম্যাপ হোস্ট করা আপনার দায়িত্ব।
URL কি সার্ভারে যায়?
robots.txt স্ট্রিং টাইপ করার সময় ব্রাউজারে তৈরি হয়।