Cute White Spider

OpenAI met à jour son robot d'exploration ChatGPT : OAI-SearchBot

OpenAI a mis à jour son spider/crawler qu'il utilise pour ChatGPT, OAI-SearchBot. La société d'IA a mis à jour la description et les détails des informations du robot en supprimant le fait qu'elles soient utilisées pour les liens et pour former les modèles de base d'IA générative d'OpenAI.

Pieter Serraris a repéré ce changement et l'a publié sur LinkedIn. Il a écrit : « OpenAI a apporté de grands changements dans la description des rôles de leurs robots d'exploration et de leurs agents utilisateurs. »

Voici les changements, les mots surlignés en rouge ont été supprimés et les mots surlignés en vert ont été ajoutés :

Mise à jour du robot de recherche Openai Chatgpt Crawler Oai

Pieter a résumé les changements :

  • Il semble que l'utilisateur ChatGPT (le robot d'action de l'utilisateur) ne se conformera plus aux règles robots.txt (Open a modifié le libellé de « les balises robots.txt suivantes », faisant référence aux 3 agents utilisateurs en « balises robots.txt OAI SearchBot et GPTBot »)
  • OAISearchBot n'est plus utilisé pour alimenter les liens de navigation dans les réponses ChatGPT (bloquer ce bot ne signifie pas que vous n'apparaîtrez pas dans les liens)
  • L'utilisateur ChatGPT est désormais également utilisé pour les requêtes GPT personnalisées et les actions GPT.
  • OAISearchBot et GPTBot partagent des informations entre eux (« Si votre site a autorisé les deux robots, nous pouvons utiliser les résultats d'une seule analyse pour les deux cas d'utilisation afin d'éviter une analyse en double. ») -> cela confirme ce que nous avons vu récemment dans les fichiers journaux : pour certaines invites, nous voyons 2 ou les 3 robots OAI visiter le site.

Pour la plupart des gens, OpenAI explore votre site bien plus qu’il ne vous envoie de trafic – alors gardez cela à l’esprit.

Discussion sur le forum sur LinkedIn.