Référence des robots d'IA
Google-Extended : ce qu'il contrôle vraiment
Google-Extended contrôle si votre contenu peut servir à entraîner les modèles Gemini et à l'ancrage dans Gemini Apps et Vertex AI. Google indique qu'il n'affecte pas l'inclusion dans Google Search et n'est pas un signal de classement. Il ne contrôle pas les AI Overviews.
Les faits
Tiré de la documentation d{operator}.
- Token robots.txt
- Google-Extended
- Opérateur
- Ce qu'il alimente
- Entraînement de modèles
- Respecte le robots.txt
- Oui. Il n'existe que comme contrôle robots.txt.
Ce que coûte chaque choix
Aucune des deux options n'est gratuite. Voici l'arbitrage.
Si vous l'autorisez
Votre contenu peut servir à l'entraînement de Gemini et à l'ancrage dans Gemini Apps et Vertex AI.
User-agent: Google-Extended Allow: /
Si vous le bloquez
Vous vous en retirez. Google indique que votre inclusion et votre classement dans Search ne sont pas affectés — et, point important, les AI Overviews non plus.
User-agent: Google-Extended Disallow: /
Décider cela en même temps que pour les autres robots est plus simple au même endroit : construire le fichier entier.
Bon à savoir
- Le token le plus mal compris de cette liste. Le bloquer ne vous retire ni des AI Overviews ni de l'AI Mode.
- Ce n'est pas vraiment un robot. Aucun agent distinct ne récupère sous ce nom : c'est un token de contrôle lu dans le robots.txt.
- Google dit explicitement que ce n'est pas un signal de classement : le bloquer n'entraîne donc aucune pénalité en recherche.
Le vérifier
Un en-tête user-agent ne prouve rien à lui seul, puisque n'importe quoi peut l'envoyer. Google ne publie aucune liste d'IP pour cet agent : une requête portant ce nom ne peut donc pas être confirmée comme authentique.
Questions
Bloquer Google-Extended nous retire-t-il des AI Overviews ?
Non. Les fonctions IA de Search passent par Googlebot : les contrôles sont donc les règles robots.txt de Googlebot, plus nosnippet, data-nosnippet, max-snippet et noindex.
Le bloquer nuira-t-il à nos classements ?
Google indique qu'il n'affecte pas l'inclusion dans Search et n'est pas utilisé comme signal de classement.
Comment contrôler alors les AI Overviews ?
Par les directives de snippet. nosnippet vous retire du texte affiché, max-snippet limite ce qui peut être repris. Les deux réduisent aussi votre snippet de recherche ordinaire.
Le moteur qu'il sert
Guides sur le sujet
Comment Allswap le mesure
Prêt à dominer la recherche IA ?
Commencer maintenant
Allswap