OAI-SearchBot
OAI-SearchBot est le crawler distinct d'OpenAI qui indexe le contenu web spécifiquement pour ChatGPT Search, construisant le réservoir de récupération dont cette fonctionnalité tire ses citations, indépendamment du crawler GPTBot utilisé pour la collecte de données d'entraînement des modèles. Bloquer OAI-SearchBot retire une page du réservoir de citation de ChatGPT Search sans affecter les opt-outs d'entraînement.
Pourquoi c'est important
Pour toute marque cherchant activement la visibilité sur ChatGPT Search, confirmer qu'OAI-SearchBot dispose d'un accès non bloqué est un contrôle plus direct et plus déterminant que de confirmer l'accès de GPTBot, puisque c'est OAI-SearchBot qui alimente réellement les citations, et non les données d'entraînement.
La documentation des crawlers d'OpenAI indique que les sites qui bloquent OAI-SearchBot n'apparaissent pas dans les réponses de recherche de ChatGPT, même s'ils peuvent encore figurer comme liens de navigation, et qu'un changement de robots.txt met environ 24 heures à s'appliquer. ChatGPT-User, qui récupère des pages à la demande des utilisateurs, ne sert pas à décider de ce qui apparaît dans la recherche.
Son activité progresse vite : dans une analyse de Botify portant sur sept milliards d'événements de logs, les requêtes d'OAI-SearchBot ont été multipliées par 3,5 dans les huit mois qui ont suivi le lancement de GPT-5 en août 2025. Limiter son débit ou le bloquer pour soulager le serveur peut coûter des citations dans ChatGPT, comme l'explique notre article sur la limitation de débit des crawlers IA.
Termes associés
- GPTBot
GPTBot est le crawler d'OpenAI chargé de collecter le contenu web utilisé pour entraîner ses modèles, fonctionnant séparément des crawlers qu'OpenAI utilise pour alimenter les citations de ChatGPT Search. Un site peut bloquer spécifiquement GPTBot pour refuser l'usage de son contenu à des fins d'entraînement, sans affecter la capacité de ChatGPT Search à récupérer et citer ce même contenu.
- ChatGPT Search
ChatGPT Search est le mode de réponse ancré dans le web d'OpenAI, intégré à ChatGPT, qui récupère des pages web actuelles avant de générer une réponse et affiche un panneau de sources à côté de celle-ci. Lancé fin 2024, il utilise un crawler dédié, OAI-SearchBot, distinct de GPTBot qui alimente l'entraînement des modèles.
- ChatGPT-User
ChatGPT-User est le user-agent qu'OpenAI applique lorsque ChatGPT récupère une page précise en direct, en temps réel, à la demande explicite d'un utilisateur au cours d'une conversation, distinct de l'indexation en arrière-plan effectuée par GPTBot ou OAI-SearchBot. Il correspond à une récupération ponctuelle plutôt qu'à une exploration systématique.
- robots.txt (directives IA)
robots.txt est le fichier standard de contrôle des crawlers, présent à la racine d'un site depuis longtemps, désormais étendu avec des règles spécifiques par user-agent pour des crawlers IA comme GPTBot, ClaudeBot et PerplexityBot. Un même fichier robots.txt peut autoriser le crawl classique des moteurs de recherche tout en bloquant un ou plusieurs crawlers IA, ou l'inverse.