Comment un moteur explore, indexe, classe et affiche

Un moteur de recherche exécute quatre opérations distinctes, dans cet ordre. Chacune peut réussir ou échouer sans les autres, et c'est la raison pour laquelle « mon site ne remonte pas » n'est jamais un diagnostic.

1. L'exploration

Un programme automatique parcourt le web en suivant des liens et en lisant les fichiers que les sites lui proposent. Il demande vos pages comme le ferait un navigateur, et enregistre ce que le serveur lui répond.

Ce qui peut échouer ici : le serveur répond une erreur, refuse l'accès, met trop de temps, ou le fichier robots.txt interdit le passage. La page n'existe alors pas pour le moteur, quelle que soit sa qualité.

Ce que vous contrôlez : l'accès, la vitesse de réponse, la présence de liens vers la page, et le fichier de plan du site. Les chapitres sur l'exploration et sur le fichier robots.txt détaillent chaque levier.

2. L'indexation

La page récupérée est analysée, son contenu extrait, sa langue reconnue, sa structure comprise, et le moteur décide de la conserver ou non dans son index.

Ce n'est pas automatique. Une page peut être explorée et non indexée, parce qu'elle duplique une autre page, parce qu'elle est jugée trop pauvre, ou parce que le site en propose davantage que le moteur n'est disposé à en garder.

Ce que vous contrôlez : l'unicité du contenu, la déclaration de la page de référence quand plusieurs se ressemblent, et les directives qui demandent explicitement de ne pas indexer. Le chapitre sur l'indexation explique comment vérifier l'état réel de chaque page.

3. Le classement

Quand quelqu'un formule une requête, le moteur sélectionne parmi ses pages indexées celles qui répondent, et les ordonne.

C'est l'étape la plus commentée et la moins documentée. Ce qui est établi : la correspondance avec l'intention compte davantage que la correspondance avec les mots, la qualité perçue de la source pèse, et le comportement des utilisateurs sert de correctif.

Ce que vous contrôlez : la pertinence réelle de la page pour une intention, sa lisibilité, et la réputation du domaine. Ce que vous ne contrôlez pas : la concurrence, qui bouge, et les mises à jour d'algorithme, qui redistribuent régulièrement.

4. L'affichage

Le moteur compose ensuite le résultat visible : un lien de titre, un extrait, parfois une image, un fil d'Ariane, des informations supplémentaires tirées du balisage.

C'est la seule étape où le moteur réécrit ce que vous avez publié. Le titre affiché n'est pas toujours votre balise, l'extrait est très rarement votre méta description : les deux sont choisis en fonction de la requête.

Ce que vous contrôlez : la matière première. Vous proposez, le moteur dispose. La partie sur l'apparence dans les résultats explique ce qui se négocie et ce qui ne se négocie pas.

Diagnostiquer, étape par étape

Quand une page ne rapporte rien, la remontée se fait dans l'ordre inverse, et chaque étape se vérifie en quelques minutes.

Elle est classée mais ne reçoit pas de clics ? Le problème est à l'affichage ou à l'intention. Comparez le titre affiché à ce que cherche l'internaute.

Elle est indexée mais jamais classée ? Le problème est au contenu ou à la concurrence. Regardez ce que proposent les pages qui occupent les trois premières places.

Elle est explorée mais pas indexée ? Le problème est à la qualité ou à la duplication.

Elle n'est même pas explorée ? Le problème est technique, et c'est le seul cas où la correction est rapide et certaine.