Points clés
- L’exploration repose sur les agents Google existants ; Google-Extended n’a pas de chaîne d’agent HTTP propre.
- Google désigne Googlebot et les contrôles d’extrait ou d’indexation pour les fonctionnalités d’IA de sa recherche.
- Applebot-Extended n’explore aucune page et ses règles ne comptent pas dans le classement de Search.
- Apple désigne nosnippet pour limiter la reprise dans les réponses de connaissance générale de Siri et Search.
Google-Extended et Applebot-Extended : ce que ces directives bloquent selon Google et Apple
En bref
Dans robots.txt, User-agent: Google-Extended contrôle l’entraînement des futures générations de Gemini et le grounding, c’est-à-dire l’apport de contenu au modèle pendant une demande. Selon Google, 14 juillet 2026, ce contenu provient de l’index de recherche et sert à améliorer l’exactitude et la pertinence de la réponse. Le jeton concerne les services nommés dans cette documentation, sans modifier l’inclusion du site dans Google Search. Chez Apple, 4 septembre 2026, Applebot-Extended permet de refuser l’entraînement des modèles de fondation. Ces jetons règlent l’usage des contenus explorés. Pour limiter les informations affichées dans les fonctionnalités d’IA de sa recherche, Google Search Central, 10 décembre 2025 renvoie aux contrôles d’extrait et d’indexation.
Points clés
- Selon Google, 14 juillet 2026, Google-Extended n’a pas de chaîne d’agent HTTP propre : les agents habituels assurent l’exploration.
- Cette même documentation couvre l’entraînement des futures générations de Gemini et le grounding dans les services désignés. Le jeton ne modifie pas l’inclusion dans Google Search et ne sert pas de signal de classement.
- Google Search Central, 10 décembre 2025 cite
nosnippet,data-nosnippet,max-snippetetnoindexpour limiter les informations affichées dans la recherche. - Selon Apple, 4 septembre 2026, Applebot-Extended n’explore aucune page. Son refus laisse possible la présence dans les résultats de recherche, et ses règles ne comptent pas pour le classement.
- Apple distingue ce choix d’entraînement de la balise
nosnippet, qui contrôle notamment la reprise de contenu dans les réponses de connaissance générale de Siri et de Search.
Que sont Google-Extended et Applebot-Extended ?
Google-Extended et Applebot-Extended sont des noms reconnus dans robots.txt pour contrôler l’usage des données collectées par leurs éditeurs. Le mot « jeton » désigne ici le nom placé après User-agent: dans le fichier.
La liste des robots de Google, mise à jour le 14 juillet 2026, précise que Google-Extended sert de contrôle, tandis que l’exploration utilise les chaînes d’agents existantes. La documentation Apple du 4 septembre 2026 indique que son jeton détermine l’utilisation des données qu’Applebot a explorées.
| Éditeur | Jeton dans robots.txt | Usage contrôlé | Ce qui reste possible |
|---|---|---|---|
Google-Extended | Entraînement des futures générations de Gemini et grounding dans les services nommés | Inclusion du site dans Google Search | |
| Apple | Applebot-Extended | Entraînement des modèles de fondation d’Apple | Exploration par Applebot et présence dans les résultats de recherche |
Nous vous recommandons de formuler votre décision en termes d’usage : autoriser la collecte pour la recherche et autoriser l’entraînement répondent à des objectifs distincts. Ce tableau permet de choisir le contrôle qui correspond à votre intention avant de modifier le fichier.
Que bloque Google-Extended selon Google ?
Google-Extended permet de refuser l’utilisation des contenus explorés pour entraîner les futures générations de Gemini et alimenter certains services en informations lors d’une demande.
Dans sa documentation du 14 juillet 2026, Google nomme Gemini Apps et Vertex AI API for Gemini pour les modèles concernés par l’entraînement. Pour le grounding, il désigne Gemini Apps et Grounding with Google Search on Vertex AI. Le contenu est alors fourni depuis l’index de recherche au moment où le modèle traite la demande.
Le jeton réunit donc un contrôle d’entraînement et un contrôle d’utilisation à la demande dans les services cités. Nous vous recommandons de tenir compte de ces usages ensemble lorsque vous décidez d’autoriser ou de refuser Google-Extended.
Google précise aussi que le jeton n’a aucun effet sur l’inclusion du site dans Google Search et ne constitue pas un signal de classement. La règle peut donc exprimer votre choix sur ces usages tout en conservant la possibilité d’apparaître dans la recherche.
Google-Extended agit-il sur les aperçus IA ?
Pour les fonctionnalités d’IA de Google Search, la documentation désigne Googlebot et les contrôles d’affichage des pages. Le guide de Google Search Central du 10 décembre 2025 explique que les directives robots.txt visant Googlebot contrôlent l’exploration pour la recherche.
Pour limiter les informations que Google montre à partir de vos pages, ce guide énumère nosnippet, data-nosnippet, max-snippet et noindex. Il renvoie séparément à Google-Extended pour limiter l’entraînement et le grounding dans certains autres systèmes de Google. Son périmètre documenté ne permet donc pas de présenter Google-Extended comme une commande de retrait des aperçus IA.
Le même guide donne une marche à suivre si du contenu continue d’apparaître après une modification des contrôles d’extrait. Il demande de vérifier que Googlebot reçoit bien le contrôle prévu, en examinant le HTML dans l’outil d’inspection d’URL. Il faut ensuite laisser Google explorer de nouveau la page et traiter le changement.
Notre recommandation est de distinguer cette vérification du choix sur Gemini : relevez le contrôle appliqué à la page et le HTML reçu par Googlebot avant de conclure sur son application dans la recherche.
Que bloque Applebot-Extended selon Apple ?
Applebot-Extended permet de refuser l’usage de votre contenu pour entraîner les modèles de fondation d’Apple. La page « About Applebot », publiée le 4 septembre 2026, cite les modèles qui alimentent notamment Apple Intelligence, Services et Developer Tools.
Apple précise que les pages refusant Applebot-Extended peuvent rester dans les résultats de recherche. Les règles de ce jeton n’entrent pas dans le classement de Search. L’exploration par Applebot reste régie par les instructions qui le concernent : un refus d’entraînement et une autorisation de parcourir vos pages peuvent donc coexister.
Pour les réponses de connaissance générale dans Siri et Search, Apple décrit un autre contrôle : la balise meta nosnippet. Apple indique ne pas utiliser les données ainsi marquées comme contexte supplémentaire lors de la production de réponses par les modèles dans ses produits et services. La documentation précise également qu’Applebot ne produit alors ni description ni réponse web pour la page ; une suggestion de visite affiche seulement son titre.
Si votre objectif est de limiter la reprise du contenu dans ces réponses, c’est ce contrôle qu’Apple désigne. Si votre objectif porte sur l’entraînement, Apple désigne Applebot-Extended. Nous vous recommandons de noter séparément ces décisions dans vos consignes au prestataire qui gère le site.
Comment écrire ces règles dans robots.txt ?
Vous pouvez écrire un groupe pour chaque jeton et y indiquer les chemins concernés. Les exemples ci-dessous proviennent des documentations des éditeurs ; ils montrent des refus limités à des chemins précis.
La liste des robots de Google du 14 juillet 2026 donne ce groupe :
user-agent: Google-Extended
allow: /archive/1Q84
disallow: /archive/
La règle refuse les usages concernés pour /archive/, avec une autorisation plus précise pour /archive/1Q84. La spécification interprétée par Google, mise à jour le 31 août 2026, indique que le chemin le plus spécifique détermine la règle applicable. Le chemin / correspond à tous les chemins du site : Disallow: / étend donc le refus à l’ensemble, sous réserve des règles plus spécifiques.
La documentation Apple du 4 septembre 2026 publie cet exemple :
User-agent: Applebot-Extended
Disallow: /private/
Le chemin /private/ est celui choisi par Apple pour illustrer le refus d’usage pour l’entraînement. Le nom Applebot-Extended est essentiel : remplacer ce nom par Applebot changerait le contrôle visé et porterait sur l’exploration.
Le robots.txt de citead.com, relevé le 9 octobre 2026, contient Google-Extended et Applebot-Extended dans un groupe partagé avec d’autres agents. Ce groupe comporte Allow: / et Disallow: /app/. Il exprime le choix du site à cette date, sans constituer une recommandation d’autoriser ces usages pour votre activité.
Apple ajoute une règle utile pour relire votre fichier : si les instructions ne mentionnent pas Applebot mais mentionnent Googlebot, Applebot suit celles de Googlebot. Notre recommandation est donc de relire ces groupes ensemble avant toute modification. Conservez aussi une copie datée du fichier et la décision qui motive chaque changement, pour pouvoir expliquer ensuite le périmètre retenu.
Comment distinguer ces jetons des contrôles d’exploration ?
Ces jetons portent sur les usages que Google et Apple leur attribuent. Ils laissent l’exploration et les contrôles de recherche aux règles prévues pour les robots concernés.
La liste de Google du 14 juillet 2026 précise qu’une préférence adressée à Googlebot affecte Google Search et ses fonctionnalités. Chez Apple, 4 septembre 2026, Applebot reste chargé de l’exploration. Modifier les groupes de ces robots engage donc un périmètre différent de celui des jetons Extended.
Pour les autres éditeurs, il faut examiner leurs propres agents et leurs usages documentés. Vous pouvez poursuivre avec « OAI-SearchBot, GPTBot et ChatGPT-User : les trois robots d’OpenAI et ce que fait chacun ».
Pour décider, nous vous recommandons de consigner l’usage que vous acceptez, les chemins concernés et le contrôle choisi. Cette formulation évite de résumer des décisions différentes par une consigne générale comme « bloquer l’IA ».