robots.txt জেনারেটর

একটি User-agent দল। লাইনে Allow: /পথ বা Disallow: /পথ; খালি পথের নিয়ম বাদ যায়। খালি লাইন বাদ। পথ / দিয়ে শুরু, * ও শেষে একটি $ চলে; স্পেস, নিয়ন্ত্রণ, # ও ভুল শতাংশ বাতিল। ঐচ্ছিক Sitemap HTTP/HTTPS, পরিচয় বা ফ্র্যাগমেন্ট ছাড়া। নিজের সাইটের জন্য ডাউনলোড। এটি ক্রলার নির্দেশ, সুরক্ষা বা ইনডেক্সের নিশ্চয়তা নয়।

User-agent≤1 · Allow/Disallow≤100 · /≤1024 UTF-16 · Sitemap≤1 · ইনপুট/ফলাফল≤16KiB UTF-8 · ≤5s

পাঠ এখানেই থাকে

ইনপুট ও ফল এই ট্যাবের মেমোরিতে থাকে। আপলোড, সংরক্ষণ, বিশ্লেষণ, লগ, URL বা ইতিহাস নয়। মুছলে, মোড বদলালে বা চলে গেলে সরবে। শুধু ভাষা/থিম/সম্মতি সেভ হয়।