Guide rapide
Un exemple pour commencer
Vous saisissez
- Nom du robot d’exploration
*
- Chemins interdits
/drafts/
- URL du sitemap
https://example.com/sitemap.xml
Vous obtenez
User-agent: * Disallow: /drafts/ Sitemap: https://example.com/sitemap.xml
Fonctionnement et limites
Saisissez un chemin commençant par / par ligne. Laissez le champ vide pour autoriser tous les chemins.