robots.txt உருவாக்கி

ஒரு User-agent குழு. வரி Allow: /பாதை அல்லது Disallow: /பாதை; காலிப் பாதை விதி புறக்கணிப்பு. காலி வரிகள் புறக்கணிப்பு. பாதை / தொடக்கம், * மற்றும் இறுதி ஒரு $; இடைவெளி, கட்டுப்பாடு, #, தவறான சதவீதம் இல்லை. விருப்ப Sitemap HTTP/HTTPS, அடையாளம்/துண்டு இல்லாமல். உங்கள் தளத்திற்குப் பதிவிறக்கவும். ஊர்வி அறிவுறுத்தல்; பாதுகாப்போ இன்டெக்ஸ் உறுதியோ இல்லை.

User-agent≤1 · Allow/Disallow≤100 · /≤1024 UTF-16 · Sitemap≤1 · உள்ளீடு/முடிவு≤16KiB UTF-8 · ≤5s

உரை இங்கேயே இருக்கும்

உள்ளீடு/முடிவு இத்தாவல் நினைவகத்தில் மட்டுமே. பதிவேற்றம், சேமிப்பு, பகுப்பாய்வு, பதிவு, URL அல்லது வரலாறு இல்லை. அழித்தல், முறைமாற்றம் அல்லது வெளியேறுதல் அகற்றும். மொழி/தீம்/ஒப்புதல் மட்டும் சேமிக்கலாம்.