Gerador robots.txt

Um grupo User-agent. Linha Allow: /caminho ou Disallow: /caminho; regras com caminho vazio são ignoradas. Linhas vazias ignoradas. Caminhos iniciam /, aceitam * e um $ final; sem espaços, controles, # ou percentuais inválidos. Sitemap opcional HTTP/HTTPS sem credenciais/fragmento. Baixe para seu site. São instruções, sem proteção nem garantia de indexação.

User-agent≤1 · Allow/Disallow≤100 · /≤1024 UTF-16 · Sitemap≤1 · Entrada/Resultado≤16KiB UTF-8 · ≤5s

O texto fica aqui

Entrada e resultado ficam na memória desta aba. Sem envio, armazenamento, análise, logs, URL ou histórico. Limpar, mudar de modo ou sair os remove. Só idioma/tema/consentimento podem ser salvos.