Accueil Outils Générateur de robots.txt

Générateur de robots.txt

Votre domaine ?

Démarrage rapide :

URL du sitemap (facultatif) ?

Aperçu du robots.txt en direct

User-agent: *
Disallow:

Placez le fichier à la racine de votre site pour qu’il soit accessible à l’adresse yourdomain.com/robots.txt.

Qu’est-ce que le générateur de robots.txt ?

Le générateur construit un robots.txt valide à partir de modèles et d’options en un clic : quels robots vont où, quels répertoires restent bloqués, où se trouve le sitemap. La syntaxe est vérifiée pour qu’une faute de frappe ne bloque pas tout le site par accident.

Mode d’emploi

Choisissez le modèle de plateforme (WordPress, Shopify, Next.js, générique).
Ajustez les règles : chemins Disallow, crawl-delay, autoriser ou bloquer les robots IA.
Saisissez l’URL du sitemap, copiez ou téléchargez le fichier et placez-le à la racine.

Fonctionnalités

Modèles avec les règles éprouvées de chaque plateforme.
Interrupteurs pour les robots IA (GPTBot, CCBot, etc.).
Vérification de syntaxe et de logique avec alerte sur « Disallow: / ».
Sans compte.

Outils associés

Générateur de sitemap XML, vérificateur d’en-têtes HTTP.

Read the guide

Écrire un robots.txt : guide avec exemples pour WordPress, Shopify et Next.js

Écrire un robots.txt : ce qu’il peut et ne peut pas faire, la syntaxe en cinq lignes, des modèles pour WordPress, Shopify et Next.js, les robots IA et les trois erreurs qui sortent un site de Google.

Questions fréquentes

Le robots.txt empêche-t-il l’indexation ?

Non, seulement l’exploration. Pour garder une page hors de l’index, il faut une balise noindex, et la page ne doit pas être bloquée par le robots.txt.