Techopedia explique Moteur de recherche
Un moteur de recherche effectue un certain nombre d’étapes pour faire son travail. Tout d’abord, une araignée/un robot d’exploration du Web parcourt le Web à la recherche de contenu qui est ajouté à l’index du moteur de recherche. Ces petits robots peuvent scanner toutes les sections et sous-pages d’un site Web, y compris le contenu tel que les vidéos et les images.
Les hyperliens sont analysés pour trouver des pages internes ou de nouvelles sources à crawler lorsqu’ils pointent vers des sites Web externes. Pour aider les robots à faire leur travail d’exploration de manière plus efficace, les sites Web plus importants soumettent généralement un plan de site XML spécial au moteur de recherche qui agit comme une carte routière du site lui-même.
Une fois que toutes les données ont été récupérées par les robots, le crawler les ajoute à une bibliothèque en ligne massive de toutes les URL découvertes. Ce processus constant et récursif est connu sous le nom d’indexation, et est nécessaire pour qu’un site web soit affiché dans la SERP. Ensuite, lorsqu’un utilisateur interroge un moteur de recherche, des résultats pertinents sont renvoyés en fonction de l’algorithme du moteur de recherche.
Plus un site Web est classé dans la SERP, plus il devrait être pertinent par rapport à la requête du chercheur. Comme la plupart des utilisateurs ne parcourent que les premiers résultats, il est particulièrement important pour un site web de se classer suffisamment haut pour certaines requêtes afin d’assurer son succès en termes de trafic.
Toute une science s’est développée au cours des dernières décennies pour s’assurer qu’un site web, ou du moins certaines de ses pages, « escalade » le classement pour atteindre les premières positions. Cette discipline est connue sous le nom d’optimisation des moteurs de recherche (SEO).
Les premiers résultats des moteurs de recherche étaient basés en grande partie sur le contenu des pages, mais comme les sites Web ont appris à jouer le système grâce à des pratiques SEO avancées, les algorithmes sont devenus beaucoup plus complexes et les résultats de recherche renvoyés peuvent être basés sur littéralement des centaines de variables.
Chaque moteur de recherche utilise maintenant son propre algorithme qui pèse de nombreux facteurs complexes tels que la pertinence, l’accessibilité, la convivialité, la vitesse de la page, la qualité du contenu et l’intention de l’utilisateur afin de trier les pages dans un certain ordre.
Ceux qui sont employés comme référenceurs dépensent souvent une énergie énorme pour essayer de démêler l’algorithme, car les entreprises ne sont pas transparentes sur leur fonctionnement, en raison de la nature propriétaire de leur activité et de leur volonté d’empêcher la manipulation des résultats des moteurs de recherche.
Il y avait auparavant un certain nombre de moteurs de recherche avec une part de marché importante. En 2020, Google contrôle la grande majorité du marché occidental ; Microsoft Bing est peu présent en deuxième position. Alors que Yahoo génère de nombreuses requêtes, leur technologie de recherche back-end est sous-traitée à Microsoft.
Dans d’autres régions du monde, d’autres moteurs de recherche détiennent la majorité du marché. En Chine, par exemple, le moteur de recherche le plus utilisé est Baidu, qui a été lancé à l’origine en 2000, tandis qu’en Russie, plus de 50 % des utilisateurs se servent de Yandex.