En bref. YandexBot explore les pages pour Yandex Search ; son identité se vérifie par la concordance des résolutions DNS inverse et directe.
Définition : YandexBot est le principal robot d’indexation de Yandex, un système qui explore les pages des sites web et les charge dans la base de données de son moteur de recherche. Au 17 octobre 2026, Yandex documente son identité, ses règles d’accès et sa procédure de vérification dans Yandex Webmaster.
Points clés
- La documentation sur les robots de Yandex présente YandexBot comme le principal robot d’indexation et répertorie des robots distincts pour les images et les vidéos.
- La documentation sur User-agent permet de définir un groupe propre à
YandexBotdansrobots.txt, le fichier qui contient les directives d’accès destinées aux robots d’exploration. - Les consignes de soumission d’un site de Yandex indiquent que les fichiers Sitemap et le protocole IndexNow permettent de signaler les modifications des pages.
- L’outil de vérification des pages affiche le code de réponse et le contenu de la page reçus par le robot sélectionné.
Comment identifier et vérifier YandexBot ?
L’agent utilisateur (user-agent) est l’identifiant qu’un client transmet avec une requête. La documentation de vérification de Yandex fournit cette chaîne pour YandexBot :
Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)
La même documentation avertit que d’autres robots peuvent imiter cet identifiant. La vérification commence par l’adresse IP de la requête dans les journaux du serveur. Une résolution DNS inverse, qui permet de trouver un nom d’hôte à partir d’une adresse IP, doit renvoyer un nom se terminant par yandex.ru, yandex.net ou yandex.com. Une résolution DNS directe de ce nom d’hôte doit ensuite renvoyer l’adresse IP d’origine.
Yandex propose aussi un outil de vérification des adresses IP des robots d’indexation. Yandex recommande le filtrage par DNS inverse plutôt que la tenue de listes d’adresses IP, car cette méthode résiste mieux aux changements de ses réseaux internes. Les journaux peuvent inclure une version de navigateur à côté de l’identifiant du robot ; Yandex recommande d’effectuer la recherche sans cette version, car elle peut changer.
Quelles règles robots.txt s’appliquent ?
Le guide de la directive User-agent de Yandex donne un exemple propre à un robot d’exploration. Le groupe destiné à son principal robot d’indexation peut s’écrire ainsi :
User-agent: YandexBot
Disallow: /*id=
L’exemple applique Disallow: /*id= au principal robot d’indexation. Dans l’exemple du guide, le groupe YandexBot est prioritaire pour ce robot sur les groupes Yandex et *. La présence d’un groupe distinct User-agent: Yandex conduit également le robot d’indexation à ignorer le groupe général User-agent: *.
Les règles doivent tenir compte du robot concerné. Le tableau des robots de Yandex indique que YandexBot respecte les règles générales de robots.txt, tandis que certains autres robots de Yandex peuvent ignorer les restrictions générales. Le tableau présente YandexImages comme le robot d’indexation des images et YandexVideo comme un robot d’indexation des vidéos.
Comment vérifier l’exploration et l’accès aux pages ?
Les consignes de soumission d’un site de Yandex expliquent qu’un fichier Sitemap fournit les URL du site à traiter lors d’une exploration ultérieure. Dans Yandex Webmaster, Indexing > Reindex pages signale au robot d’indexation les pages nouvelles ou modifiées sélectionnées à visiter. IndexNow signale automatiquement les pages mises à jour, nouvelles et supprimées.
La documentation de l’outil de vérification des pages décrit la sélection d’une URL de page, d’un type d’appareil et d’un robot. L’agent utilisateur du robot sélectionné apparaît sous le champ. L’outil indique le code de réponse, le contenu visible par le robot et si la page est incluse dans les résultats de recherche ou en est exclue. Ces vérifications aident à diagnostiquer l’accès aux pages séparément de l’identification d’une requête dans les journaux du serveur.
Termes associés
Questions fréquentes
Un agent utilisateur YandexBot suffit-il à vérifier une requête ?
La procédure de vérification de Yandex exige que vous vérifiiez l’adresse IP de la requête par DNS inverse, puis que vous confirmiez que la résolution DNS directe renvoie la même adresse IP. L’agent utilisateur seul peut être imité.
Comment demander une nouvelle exploration d’une page mise à jour ?
Vous pouvez soumettre l’URL via Indexing > Reindex pages dans Yandex Webmaster. Les consignes de soumission de Yandex décrivent cette action comme un signal invitant le robot d’indexation à visiter la page.
Puis-je examiner ce que reçoit un robot de Yandex ?
Vous pouvez utiliser l’outil de vérification des pages de Yandex Webmaster pour sélectionner un robot et examiner le code de réponse et le contenu de la page qu’il reçoit.
Sources
- Yandex Webmaster, « How to check that a robot belongs to Yandex », sans date
- Yandex Webmaster, « The User-agent directive », sans date
- Yandex Webmaster, « How can I add a site to search? », sans date
- Yandex Webmaster, « Page check », sans date
Vérifiez comment une page se lit pour les moteurs de réponse. Ouvrir l’analyseur de score GEO