Pembuat robots.txt

Satu grup User-agent. Baris Allow: /jalur atau Disallow: /jalur; aturan jalur kosong diabaikan. Baris kosong diabaikan. Jalur mulai /, boleh * dan satu $ terakhir; tanpa spasi, kontrol, # atau persen salah. Sitemap opsional HTTP/HTTPS tanpa kredensial/fragmen. Unduh untuk situs sendiri. Ini petunjuk perayap, bukan perlindungan atau jaminan indeks.

User-agent≤1 · Allow/Disallow≤100 · /≤1024 UTF-16 · Sitemap≤1 · Masukan/Hasil≤16KiB UTF-8 · ≤5s

Teks tetap di sini

Masukan dan hasil hanya di memori tab. Tanpa unggah, penyimpanan, analitik, log, URL atau riwayat. Hapus, ganti mode atau keluar menghilangkannya. Hanya bahasa/tema/pilihan persetujuan tersimpan.