Référence des robots d'IA
OAI-AdsBot : contrôle des annonces
OAI-AdsBot vérifie l'innocuité des pages soumises comme publicités sur ChatGPT. Il ne joue aucun rôle dans l'entraînement, l'indexation ou la réponse : pour un site qui ne fait pas de publicité sur ChatGPT, c'est l'entrée la moins conséquente du parc d'OpenAI.
Les faits
Tiré de la documentation d{operator}.
- Token robots.txt
- OAI-AdsBot
- Opérateur
- OpenAI
- Ce qu'il alimente
- Contrôle des annonces
- Respecte le robots.txt
- Oui. OpenAI désigne le robots.txt comme le contrôle.
- Chaîne user-agent
- Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko); compatible; OAI-AdsBot/1.0; +https://openai.com/adsbot
Ce que coûte chaque choix
Aucune des deux options n'est gratuite. Voici l'arbitrage.
Si vous l'autorisez
Les pages que vous soumettez comme annonces sur ChatGPT peuvent être vérifiées, ce que ce processus exige.
User-agent: OAI-AdsBot Allow: /
Si vous le bloquez
La vérification publicitaire de vos pages peut échouer. Rien ne change pour la visibilité organique, dans un sens comme dans l'autre.
User-agent: OAI-AdsBot Disallow: /
Décider cela en même temps que pour les autres robots est plus simple au même endroit : construire le fichier entier.
Bon à savoir
- C'est le token le plus récent du parc d'OpenAI : les fichiers robots.txt écrits plus tôt pour les robots IA ne le mentionnent pas du tout.
- Il n'a aucune incidence sur les réponses organiques : il n'existe donc aucun argument de visibilité pour l'autoriser.
- Si vous faites de la publicité sur ChatGPT, le bloquer joue contre vous.
Le vérifier
Un en-tête user-agent ne prouve rien à lui seul, puisque n'importe quoi peut l'envoyer. OpenAI publie les plages d'IP de ses robots : une requête n'est authentique que si l'IP source y figure.
Questions
Devons-nous l'autoriser ?
Seulement si vous faites de la publicité sur ChatGPT. Il ne joue aucun rôle dans les réponses organiques.
Le bloquer affecte-t-il la recherche ChatGPT ?
Non. L'éligibilité à la recherche vient uniquement d'OAI-SearchBot.
Pourquoi n'est-il pas dans notre robots.txt ?
Il a été publié après les autres : la plupart des règles robots.txt pour l'IA lui sont antérieures.
Le moteur qu'il sert
Guides sur le sujet
Prêt à dominer la recherche IA ?
Commencer maintenant
Allswap