Générateur de robots.txt
Écrire un robots.txt que les robots respectent.
Données d’entrée
Cet outil fonctionne entièrement dans votre navigateur. Les données saisies ou chargées ne sont jamais envoyées.
Résultat
Saisissez vos données, puis lancez l’outil.
À propos de cet outil
Compose un fichier robots.txt valide : autorisations par répertoire, directives User-agent et déclaration du sitemap, avec les erreurs courantes signalées avant copie.
Comment l’utiliser
- Ajoutez les règles de blocage et le sitemap.
- Copiez le fichier produit à la racine du site.
Questions fréquentes
Un robots.txt empêche-t-il l’indexation ?
Non, il empêche l’exploration : une page bloquée peut être indexée sans contenu. Utilisez une balise noindex pour exclure réellement une page.
Où placer le fichier ?
À la racine du domaine : https://exemple.fr/robots.txt, jamais dans un sous-dossier.
Pour aller plus loin
Outils liés
Générateur de sitemap
Générer un sitemap XML à partir d’une liste d’URL.
Audit SEO d’une page
Contrôler les points techniques essentiels d’une URL.
Générateur de balises meta
Générer le titre, la description et les directives d’indexation d’une page.
Analyseur de balises meta
Contrôler les métadonnées d’une page à partir de son code source.
Aperçu Open Graph
Voir comment un lien apparaît sur Facebook, LinkedIn et WhatsApp.
Aperçu de carte X (Twitter)
Simuler l’affichage d’un lien X (Twitter).