En bref. Un benchmark d’API mesure la configuration testée ; son utilisation comme indicateur indirect de la recherche grand public nécessite une validation sur l’interface grand public.
Définition : Un banc d’essai (benchmark) réalisé via une interface de programmation d’application (API) mesure les réponses produites par des requêtes logicielles dans des conditions de test définies. Son utilisation comme indicateur indirect d’une interface de recherche grand public, telle que la fenêtre de conversation d’un site web, nécessite une validation à partir d’observations de cette interface.
Points clés
- L’article sur BrowseComp décrit un benchmark consacré à la recherche d’informations difficiles à trouver et écarte explicitement les réponses longues et les requêtes utilisateur ambiguës.
- Au 17 octobre 2026, le guide de recherche web via l’API d’OpenAI distingue les sources récupérées des citations incluses dans une réponse.
- Le guide de recherche web de ChatGPT d’OpenAI indique que les résultats de recherche et les citations apparaissent dans la conversation lorsqu’une recherche est effectuée, et que les paramètres de l’espace de travail peuvent restreindre l’accès à la recherche.
Qu’évalue réellement BrowseComp ?
L’article sur BrowseComp, soumis le 16 avril 2025, décrit des questions créées par des formateurs humains, accompagnées de réponses de référence courtes et vérifiables. Sa procédure d’évaluation utilise un modèle d’IA pour comparer la réponse prédite à la référence selon leur équivalence sémantique, c’est-à-dire pour déterminer si elles donnent la même réponse.
L’article identifie la persévérance dans la recherche et la capacité à trouver des informations difficiles d’accès comme les aptitudes évaluées. Il qualifie le benchmark d’incomplet, car les requêtes utilisateur ordinaires impliquent aussi des réponses longues et des ambiguïtés. Pour la mesure, cela signifie que l’exactitude des réponses à BrowseComp et la fréquence des citations d’un site web dans la recherche grand public nécessitent des critères d’évaluation distincts.
Quelles conditions de test de l’API doivent figurer dans le rapport ?
Le guide de l’API d’OpenAI indique que l’API Responses laisse le modèle décider s’il effectue une recherche ; la recherche via Chat Completions récupère systématiquement des informations sur le web. Le guide décrit aussi l’accès à des modèles et à un outil utilisés par la recherche dans ChatGPT.
Un rapport doit préciser le point de terminaison (endpoint), le modèle et la configuration de recherche. Le guide documente le filtrage par domaine, la localisation approximative de l’utilisateur et les réglages de l’accès au web en direct.
Ce fragment de requête active la recherche et demande la liste des sources récupérées :
{
"tools": [{"type": "web_search"}],
"include": ["web_search_call.action.sources"]
}
Pour le décompte des citations, les annotations documentées url_citation identifient les URL citées. La liste sources, plus large, comprend les URL consultées lors de l’élaboration de la réponse. Un rapport sur les citations doit conserver cette distinction.
Comment comparer l’interface grand public ?
Le guide de recherche web de ChatGPT d’OpenAI décrit l’apparition de citations dans la conversation lorsqu’une recherche web est effectuée. Il documente aussi les conditions liées au compte et à l’espace de travail pour la recherche approfondie (deep research), une investigation portant sur plusieurs sources qui produit un rapport.
Pour une comparaison avec cette interface, la conséquence pratique consiste à consigner la question exacte, la date, les conditions liées au compte ou à l’espace de travail et le mode de recherche sélectionné, avec la réponse visible et les liens de citation. La recherche ordinaire et la recherche approfondie doivent porter des libellés de résultat distincts.
L’article sur BrowseComp illustre l’intérêt de décrire la configuration testée : ses évaluations précisent les identifiants des modèles et distinguent ceux dont la navigation web est activée. En appliquant ce principe, des questions identiques soumises à l’API et à l’interface grand public permettent une comparaison dans les conditions consignées. Conserver les observations séparément permet d’examiner les différences avant d’utiliser les résultats de l’API comme indicateur indirect.
Termes associés
- Benchmark BrowseComp
- Jeu de prompts de test
- Biais d’échantillonnage des requêtes
- Suivi des citations
Questions fréquentes
Puis-je présenter un résultat d’API comme une mesure de visibilité dans la recherche grand public ?
Indiquez le point de terminaison et la configuration testés. La documentation de l’API distingue les comportements de recherche selon les points de terminaison ; pour valider une désignation renvoyant à la recherche grand public, vous devez disposer d’observations de l’interface grand public.
Une réponse correcte à BrowseComp mesure-t-elle la fréquence des citations de mon site ?
La procédure d’évaluation de BrowseComp compare une réponse à une courte réponse de référence. Pour mesurer la fréquence des citations de votre site, définissez un contrôle distinct portant sur les liens vers ses URL dans les réponses observées.
Que dois-je conserver d’un test de l’interface grand public ?
Conservez la réponse et les liens de citation visibles avec la question et les conditions de test. Le guide de ChatGPT indique que les résultats de recherche et les citations apparaissent dans la conversation, ce qui fournit un élément concret pour examiner cette observation.
Sources
- Jason Wei et al., arXiv, « BrowseComp: A Simple Yet Challenging Benchmark for Browsing Agents », 16 avril 2025
- OpenAI, « Web search », consulté le 17 octobre 2026
- OpenAI, ChatGPT Learn, « Web search », consulté le 17 octobre 2026
Vérifiez comment une page se lit pour les moteurs de réponse. Ouvrir l’analyseur de score GEO