Guía rápida
Prueba un ejemplo
Introduces
- Nombre del rastreador
*
- Rutas no permitidas
/drafts/
- URL del mapa del sitio
https://example.com/sitemap.xml
Obtienes
User-agent: * Disallow: /drafts/ Sitemap: https://example.com/sitemap.xml
Cómo funciona y límites
Introduce una ruta por línea que empiece por /. Deja el campo vacío para permitir todas las rutas.