Générateur robots.txt clair, testable et prêt à publier
Construisez un fichier robots.txt pour votre site, ajoutez un sitemap, bloquez les zones inutiles, choisissez votre politique pour certains bots IA, puis copiez ou téléchargez le fichier sans compte.
Créer le fichier
robots.txt généré
Méthodologie et workflow
Méthodologie: le générateur assemble les directives reconnues par les grands crawlers: User-agent, Allow, Disallow, Crawl-delay quand il est pertinent, et Sitemap. Les chemins sont nettoyes ligne par ligne, puis l'outil signale les risques les plus courants avant export.
Workflow step-by-step: choisissez un preset, ajustez les chemins, genereez le fichier, lisez les avertissements, copiez ou téléchargez, puis testez le fichier a la racine du domaine avant de le publier.
- Revu le 17 juin 2026. Les règles produites sont une aide technique, pas une garantie d'indexation.
- Confiance: élevée pour la syntaxe de base, moyenne pour les comportements propres à chaque bot.
- Confidentialité: les saisies restent dans ce navigateur; la sauvegarde utilise uniquement le stockage local.
- Avertissement: non officiel, ne remplace pas la rechercher Console, la configuration serveur, ni un contrôle d'accès pour contenu privé.
Questions fréquentes
Ou placer robots.txt ?
A la racine exacte du domaine concerne, par exemple https://example.com/robots.txt. Un fichier dans un sous-dossier ne contrôle pas tout le site.
Est-ce une mesure de sécurité ?
Non. robots.txt est une instruction volontaire pour les crawlers. Les contenus sensibles doivent être proteges par authentification, contrôle d'accès ou suppression de publication.
Puis-je bloquer l'entrainement IA et garder Google ?
Oui, vous pouvez ajouter des groupes pour certains User-agent IA tout en laissant User-agent: * autoriser vos pages publiques. Vérifiez la documentation du crawler concerne.