Guia rápido
Experimenta este exemplo
Introduzes
- Nome do rastreador
*
- Caminhos não permitidos
/drafts/
- URL do mapa do site
https://example.com/sitemap.xml
Obténs
User-agent: * Disallow: /drafts/ Sitemap: https://example.com/sitemap.xml
Como funciona e limites
Introduz um caminho por linha que comece por /. Deixa o campo vazio para permitir todos os caminhos.