À jour le 10 novembre 2026.
Depuis deux ans, beaucoup d’entreprises ont ajouté une ligne dans leur fichier robots.txt pour « bloquer l’IA ». L’intention est souvent bonne : on ne veut pas que son contenu serve à entraîner des modèles sans permission. Mais selon la ligne ajoutée, on peut aussi, sans le savoir, disparaître des réponses de ChatGPT.
Laisser le bon robot lire votre site est le plus technique des trois gestes pour apparaître dans ChatGPT, et le seul qui peut tout bloquer à lui seul. Bonne nouvelle : il se vérifie en deux minutes.
Le robots.txt est un petit fichier texte placé à la racine de votre site (votresite.com/robots.txt). Il dit aux robots des moteurs de recherche et des assistants IA quelles parties du site ils peuvent explorer. Chaque robot a un nom, et on peut lui donner des règles particulières.
OpenAI utilise plusieurs robots, et c’est là que la confusion commence. Selon sa documentation, chacun se règle indépendamment des autres.
| Robot | Ce qu’il fait | Si vous le bloquez |
|---|---|---|
| OAI-SearchBot | Explore les sites pour les afficher dans la recherche de ChatGPT. | Votre site n’apparaît plus dans les réponses de recherche de ChatGPT (il peut encore apparaître comme simple lien de navigation). |
| GPTBot | Explore du contenu qui peut servir à entraîner les modèles d’OpenAI. | Votre contenu ne devrait pas servir à l’entraînement. Aucun effet sur la recherche. |
| ChatGPT-User | Visite une page quand un utilisateur le demande dans ChatGPT. | Les règles du robots.txt peuvent ne pas s’appliquer, puisque la visite vient d’une demande d’utilisateur. Il ne sert pas à décider qui apparaît dans la recherche. |
| OAI-AdsBot | Vérifie les pages soumises comme destination d’une publicité dans ChatGPT. | Concerne seulement les annonceurs. |
Le point clé : bloquer GPTBot ne vous retire pas de la recherche, et bloquer OAI-SearchBot ne vous protège pas de l’entraînement. Ce sont deux décisions séparées.
Si vous voulez être trouvé dans ChatGPT, mais pas que votre contenu serve à entraîner les modèles, voici les règles à ajouter à votre robots.txt :
User-agent: OAI-SearchBot
Allow: /
User-agent: GPTBot
Disallow: /
Si, au contraire, vous voulez tout permettre, vous n’avez rien de particulier à écrire : un robots.txt qui ne bloque pas ces robots les laisse passer. Sur devjpt.com, par exemple, le robots.txt accueille tous les robots, y compris ceux des assistants IA, et n’exclut que l’administration et quelques pages sans valeur.
Attention à la règle la plus dangereuse, qu’on trouve encore sur certains sites :
User-agent: *
Disallow: /
Elle bloque tous les robots qui n’ont pas de règle particulière, y compris OAI-SearchBot et Bingbot. Elle est parfois laissée par erreur après la mise en ligne d’un site en développement.
Enfin, OpenAI précise qu’il faut compter environ 24 heures après une modification du robots.txt pour que ses systèmes de recherche s’y ajustent.
Un robots.txt parfait ne suffit pas toujours. Certains hébergeurs, réseaux de diffusion de contenu (CDN) et extensions de sécurité bloquent les robots d’IA par défaut, ou les traitent comme du trafic suspect. Dans ce cas, le robot reçoit une erreur ou une page de vérification, et il ne lit jamais votre contenu.
OpenAI le mentionne explicitement : pour être admissible à la recherche, votre hébergeur ou votre CDN doit laisser passer le trafic venant des adresses IP publiées de son robot. Ces adresses sont publiques, dans un fichier fourni par OpenAI (openai.com/searchbot.json).
Si vous ne gérez pas votre hébergement vous-même, posez simplement la question à votre fournisseur : « Est-ce que vous bloquez OAI-SearchBot, GPTBot ou Bingbot ? » Profitez-en pour vérifier Bingbot, puisque Bing fait aussi partie des fournisseurs de recherche de ChatGPT.
Le plus rapide : entrez votre adresse dans le vérificateur robots.txt pour l’IA. Il applique vos règles à chaque robot d’OpenAI, de Microsoft, de Google, d’Anthropic et de Perplexity. Pour vérifier à la main :
Non. GPTBot sert à l’entraînement des modèles. Selon OpenAI, chaque réglage est indépendant : vous pouvez bloquer GPTBot et autoriser OAI-SearchBot, qui sert à la recherche.
Pas toujours. ChatGPT-User visite une page quand un utilisateur le demande. Comme l’action vient de l’utilisateur, OpenAI indique que les règles du robots.txt peuvent ne pas s’appliquer. Ce robot ne sert pas à décider qui apparaît dans la recherche : c’est OAI-SearchBot qui compte pour ça.
OpenAI parle d’environ 24 heures après la modification du robots.txt pour que ses systèmes de recherche s’ajustent. Être réellement cité dépend ensuite du contenu de vos pages.
Oui. Certains pare-feu et services de protection contre les robots bloquent les robots d’IA par défaut. Demandez à votre hébergeur s’il laisse passer les adresses IP publiées par OpenAI pour OAI-SearchBot.
Ce n’est pas nécessaire pour la recherche de ChatGPT. La documentation d’OpenAI sur ses robots ne mentionne que le robots.txt et ses adresses IP. Un fichier llms.txt peut aider à présenter votre site aux assistants, mais il ne remplace ni un robots.txt bien réglé ni des pages qui répondent vraiment aux questions. J’explique son rôle réel dans l’article sur le fichier llms.txt et les assistants IA.