Test robots.txt : vos robots IA sont-ils autorisés ?

Saisissez l’adresse de votre site : l’outil lit votre fichier robots.txt et indique, pour 15 robots de recherche et d’entraînement, s’ils peuvent accéder à votre page d’accueil.

Gratuit. Le résultat s'affiche juste après, sur cette page.

Robots de recherche et robots d’entraînement

Tous les robots IA n’ont pas le même rôle. Les robots de recherche (OAI-SearchBot, Claude-SearchBot, PerplexityBot, Googlebot, Bingbot) alimentent les réponses avec citations : les bloquer empêche ces moteurs de citer vos pages. Les robots d’entraînement (GPTBot, ClaudeBot, Google-Extended, CCBot) collectent des textes pour entraîner les modèles : les bloquer est un choix éditorial, sans effet sur les citations.

Les limites du test

  • Le test porte sur la racine du site. Une règle peut bloquer un dossier précis sans bloquer l’accueil.
  • Bloquer Google-Extended ne retire pas un site des AI Overviews ni du Mode IA, qui reposent sur Googlebot.
  • Un pare-feu ou un hébergeur peut bloquer un robot sans que robots.txt le montre.

Questions fréquentes

Faut-il bloquer GPTBot ?

C’est un choix. GPTBot sert à l’entraînement des modèles d’OpenAI. Le bloquer n’empêche pas ChatGPT de citer vos pages, tant que OAI-SearchBot reste autorisé.

Que se passe-t-il si mon site n’a pas de fichier robots.txt ?

Tous les robots sont autorisés par défaut.

Quel robot conditionne les citations dans ChatGPT ?

OAI-SearchBot, qui alimente la recherche de ChatGPT. ChatGPT-User intervient quand un utilisateur demande la lecture d’une page précise.

webdemarkDu SEO au GEO

Être trouvé par Google et cité par les IA. Le blog pratique des PME, des indépendants et des marketeurs francophones.

Votre marque est-elle visible sur Google et dans les IA ?Réserver mon audit offert