Générateur robots.txt
Saisissez l’URL de votre sitemap et copiez un bloc robots.txt prêt. Le fichier autorise tous les user-agents sur tous les chemins et ajoute une ligne Sitemap.
Mis à jour 2026-08-03 · seo
User-agent: *
Allow: /
Sitemap: https://example.com/sitemap-index.xml
À propos de cet outil
Un champ Sitemap URL pilote la sortie. Le texte est toujours User-agent: * puis Allow: / puis une ligne vide et Sitemap: suivi de votre URL. Modifiez l’entrée et l’aperçu se met à jour.
Comment utiliser
- Ouvrir le générateur: Chargez la page pour voir le champ Sitemap URL.
- Saisir l’URL du sitemap: Collez l’URL de votre sitemap ou sitemap-index (exemple https://example.com/sitemap-index.xml).
- Copier le robots.txt: Sélectionnez le bloc avec User-agent, Allow et Sitemap.
- Déployer le fichier: Enregistrez-le en robots.txt à la racine du site et vérifiez le chargement en HTTPS.
Cas d'usage
- Amorcer robots.txt pour un nouveau site entièrement crawlable.
- Indiquer sitemap-index.xml ou sitemap.xml en un seul collage.
- Remettre un fichier de base à l’hébergeur avant d’ajouter des Disallow fins.
Conseils
- Utilisez une URL absolue complète (https://…), pas un chemin relatif.
- Ce modèle autorise tout—ajoutez des Disallow à la main pour les zones privées.
FAQ
Quelles règles contient la sortie ?
User-agent: * et Allow: / plus une ligne Sitemap avec votre URL.
Puis-je bloquer des chemins dans l’UI ?
Non—c’est un démarrage permissif; éditez Disallow après copie.
Le sitemap doit-il déjà exister ?
L’outil ne fait que formater le fichier; héberger un vrai sitemap reste à votre charge.
L’URL part-elle vers un serveur ?
La chaîne robots.txt est construite dans le navigateur pendant la saisie.