Centre d'Assistance
Accueil Marketing en ligne Analyse de Site Web

Index de moteur de recherche

L'index du moteur de recherche, également connu sous le nom d'index Web ou d'index Crawler, est la base de données d'un moteur de recherche. Il contient des informations sur tous les sites Web qui peuvent être trouvés via le moteur de recherche. Dans cet article, nous vous expliquons brièvement ce terme.

Qu'est-ce qu'un index de moteur de recherche ?

Un index de moteur de recherche est une énorme base de données créée par des moteurs de recherche tels que Google, Bing ou Yahoo. Cet index contient des informations sur les sites Web, les pages et les documents qui ont été trouvés et analysés par le crawler Web (un logiciel qui parcourt l'internet).

L'index du moteur de recherche contient typiquement les informations suivantes :

  • Les URL : Les adresses des sites Web et des pages qui figurent dans l'index.

  • Titres et descriptions : Les titres et les descriptions des sites Web et des pages.

  • Le contenu : Le contenu textuel des sites Web et des pages.

  • Les métadonnées : Informations telles que les mots-clés, les descriptions et les informations sur l'auteur.

  • Les liens : Informations sur les liens entre les sites Web et les pages.

Contrôler l'indexation avec robots.txt

Dans une certaine mesure, vous pouvez contrôler l'indexation en créant un fichier robots.txt au niveau supérieur de votre espace Web. Le robots.txt est un fichier texte qui contient des instructions pour les Crawlers Web (également connus sous le nom de robots ou de spiders). Ce fichier informe les robots d'exploration des parties d'un site Web qu'ils peuvent ou ne peuvent pas explorer.

Vous trouverez des explications et des exemples sur le contenu d'un robots.txt par exemple dans Google Search Central.

Contenu