Par Elisha Bajemon | Publié le 17 octobre 2026

Le score appliqué au français : ce que montre le corpus de transfert de 60 sources

En bref

Pour le GEO en français, cette étude teste la réaction du score Citead à des modifications sur 60 sources. Dans Scoring Without the Engine, déposé sur arXiv par Elisha Bajemon et André-Louis Rochet le 7 septembre 2026, la corrélation de transfert passe de 0,59 à 0,836 après correction des motifs de citation. Le corpus réunit des extraits de Wikipédia et un petit jeu de validation local. Les poids réglés en anglais sont appliqués sans nouvel ajustement. L’expérience contrôle la réaction du score à des modifications du texte, sans mesurer la citation de pages françaises par les moteurs. Les auteurs signalent des limites liées aux accents et à une liste de fréquences des mots anglais.

Points clés

• Le papier de Bajemon et Rochet du 7 septembre 2026 décrit un corpus de 60 sources françaises, composé d’extraits de Wikipédia et d’un petit jeu local de validation.
• Selon cette même étude, l’ajout de citations attribuées faisait baisser la sous-mesure concernée de 1,9 point avant correction. Sa réponse atteint ensuite +43,7 points.
• La corrélation de transfert passe de 0,59 à 0,836 sur les captures finales corrigées, d’après les auteurs. Elle compare les réponses du score aux effets de référence.
• Le transfert constitue un sixième critère de comparaison, extérieur aux cinq tests qui décident du choix de la méthode de calcul dans le papier.
• La tokenisation limitée aux lettres ASCII et le recours à une liste anglaise pour mesurer la rareté des mots restent des limites déclarées par les auteurs.

Pourquoi tester un score dans une autre langue ?

Un test de transfert vérifie comment une méthode réglée dans une langue se comporte lorsqu’on l’applique à une autre. Dans Scoring Without the Engine, déposé le 7 septembre 2026, les poids du score sont ajustés sur le corpus anglais, puis conservés pour le français. Les blocs ajoutés aux textes sont, eux, rédigés en français.

L’exigence porte sur la stabilité de la réaction : l’alignement avec les effets de référence et la pénalisation du bourrage de mots-clés doivent tenir après le changement de langue. Le maintien des poids anglais permet d’examiner le comportement du calcul lorsque les textes et les modifications passent au français.

Le transfert intervient comme critère secondaire. Les cinq tests décisifs portent sur le contrôle négatif, la réponse à des ajouts répétés, la saturation des gains, la duplication et le biais de longueur. Une bonne corrélation en français ne suffit donc pas à sélectionner une méthode de calcul qui échoue à ces tests. Cette place dans le protocole aide à lire le résultat : c’est une vérification complémentaire du score retenu.

Comment le corpus français a-t-il été construit ?

Dans leur prépublication déposée le 7 septembre 2026, les auteurs décrivent un corpus de 60 sources françaises comprenant des extraits de Wikipédia tirés d’une liste fixe de titres et un petit jeu local de validation. Le dépôt public de TW3-Partners-OS fournit ce corpus dans le fichier geo_bench_sources_fr.jsonl.

Le caractère fixe de la sélection permet de revenir sur les mêmes textes. Le corpus publié donne ainsi accès au matériau du contrôle, au-delà du seul coefficient annoncé.

La méthode compare un texte modifié avec une version qui reçoit un ajout neutre de même longueur. Cette comparaison sert à isoler la réaction au contenu ajouté de celle que provoquerait son volume. Pour relire ce travail, nous recommandons donc de vérifier quel texte sert de référence au calcul de chaque variation. Le texte enrichi et le texte témoin doivent recevoir un ajout de même longueur.

Quelle erreur le test en français a-t-il révélée ?

Le test a révélé que la règle censée repérer les passages citables ignorait les citations attribuées. Dans le récit de l’audit publié par Bajemon et Rochet en septembre 2026, les motifs reconnus couvraient seulement des formulations de définition. Une parole rapportée avec attribution pouvait passer entièrement à travers cette détection.

L’ajout augmentait alors le nombre de phrases, sans augmenter le nombre de passages reconnus. La densité calculée diminuait : la réponse française de cette sous-mesure à l’ajout de citations était de -1,9 point. Le papier précise que le fonctionnement en anglais reposait en partie sur des correspondances accidentelles.

Les auteurs ont ajouté des motifs de discours rapporté avec attribution dans les deux langues. Après correction, la réponse de la sous-mesure atteint +43,7 points. Il faut garder son périmètre en tête : ce chiffre décrit la composante qui repère les passages citables. Le score final combine plusieurs composantes et réagit à une autre échelle.

Pour comprendre l’intérêt du contrôle, suivez la chaîne de calcul : une formulation est reconnue, cette reconnaissance alimente une densité, puis cette densité entre dans la note. L’expérience en français a permis de localiser un défaut au début de cette chaîne.

Que mesure la corrélation de transfert de 0,836 ?

Ce coefficient mesure l’accord entre les variations du score produites par les interventions en français et les effets publiés retenus comme référence pour l’ajustement. La prépublication de septembre 2026 compare notamment les réponses à l’ajout de citations, de statistiques, de sources et de termes techniques, ainsi qu’au bourrage de mots-clés.

La corrélation de Pearson résume cet accord. Dans les relevés antérieurs à la correction, elle vaut 0,59 pour la méthode retenue. Sur les relevés finaux corrigés, elle atteint 0,836. Le protocole rapproche donc des séries de réactions à des modifications contrôlées. Il ne suit pas les apparitions de pages françaises dans les réponses d’un assistant.

Le nombre aide à évaluer le transfert de la méthode entre langues. Pour décider d’une modification sur votre site, il reste nécessaire de lire ce que la règle a détecté. Ici, les auteurs relient l’amélioration de la corrélation à la correction du détecteur de discours rapporté.

Que se passe-t-il dans la chaîne complète en français ?

Le contrôle reste négatif lorsque les auteurs intègrent les plafonds et la fraîcheur au calcul final. Dans l’annexe du papier de septembre 2026 consacrée à la chaîne de production, le bourrage de mots-clés produit, avec la pondération retenue, une variation de -2,1 points à la dose 1 et de -8,2 points à la dose 8 en français. La dose correspond au nombre de blocs ajoutés.

Par rapport à l’ancienne pondération, la pondération retenue multiplie aussi par 4,6 la réponse du score complet à l’ajout de citations en français. Dans ce contrôle publié en septembre 2026, l’ajout de sources reste toutefois le levier qui fait le plus monter le score final. Les auteurs relient ce résultat à la composante de fraîcheur : les années récentes présentes dans les références ajoutées peuvent la faire progresser.

Ce mécanisme montre pourquoi il faut regarder la note complète. Une modification touche parfois plusieurs parties du calcul à la fois. L’ajout d’une référence peut agir à travers sa présence et à travers l’année qu’elle contient. L’interprétation proposée par les auteurs porte sur cette combinaison et sur les blocs utilisés dans leur expérience.

Quelles limites pour un site en français ?

Les limites concernent le traitement des mots et le choix des textes. Dans Scoring Without the Engine, déposé le 7 septembre 2026, la tokenisation, c’est-à-dire le découpage utilisé par les mesures informationnelles, repose sur les lettres ASCII. Selon les auteurs, un caractère accentué interrompt le mot tel que le découpe cette règle. Les unités comptées peuvent donc s’écarter des mots que vous lisez.

La rareté du vocabulaire pose une autre difficulté. La recherche de fréquence utilise toujours une liste anglaise, y compris pour les textes français. Les auteurs présentent ainsi l’expérience comme un test de la combinaison des sous-mesures avec des caractéristiques linguistiques dégradées. Ils annoncent la tokenisation adaptée à la langue parmi les prochaines étapes.

Le périmètre éditorial compte aussi. Des extraits encyclopédiques et un jeu local constituent un terrain de contrôle déterminé. Une page commerciale ou une présentation de service mérite un examen dans son propre contexte. Le papier qualifie explicitement le français de contrôle de transfert et écarte toute prétention à représenter le web francophone.

Que faire de ces résultats pour vos pages en français ?

Notre recommandation éditoriale est de comparer des versions d’une même page française et d’examiner les motifs de variation. Elle s’appuie sur la réserve des auteurs concernant les niveaux absolus de la mesure d’entropie dans le papier déposé le 7 septembre 2026. Dans leur étude, ce sont surtout les réactions de cette mesure aux modifications qui renseignent son comportement.

Conservez le texte avant modification, la version corrigée et le détail des sous-scores. Pour chaque correction, notez l’objectif de lecture poursuivi : rendre une attribution vérifiable, expliciter une définition ou retirer une répétition inutile. Vérifiez ensuite que le changement sert cet objectif dans la page. La note devient un élément de la relecture.

Nous recommandons également de traiter les suggestions comme des pistes à examiner. Avec les limites linguistiques décrites, comparer directement les notes absolues d’une page française et de sa traduction anglaise demanderait une validation supplémentaire. La page méthodologique de Citead permet de retrouver les composantes de la formule et les poids qui les relient.

Pour aller plus loin

• Calibrer un score par intervention : comment les poids du score ont été choisis.
• Entropie de Shannon et densité d’information : ce que mesure le premier poids du score.
• Scoring Without the Engine expliqué : ce que valide un score de contenu calculé sans interroger les moteurs.

Pour examiner le calcul utilisé lors de la relecture de vos pages, consultez la formule du score publiée par Citead.