Robot / robot d'indexation (définition)

Un robot est un logiciel qui parcours les sites web, pour le compte des moteurs de recherche, tel Google, Yahoo et Bing.

Son but est d'explorer le contenu des sites, pour fournir des informations les concernant (les contenus des pages des sites) aux moteurs de recherche, afin que ces informations (et les pages des sites où elles figurent) puisse être fournies dans les pages de résultats de recherche.

 Pour en savoir plus, nous vous invitons à la lecture du tutoriel : A quoi sert un fichier robots.txt et comment le modifier.

Cet article vous a-t-il été utile ?
Utilisateurs qui ont trouvé cela utile : 0 sur 0
Vous avez d’autres questions ? Envoyer une demande

Commentaires

Réalisé par Zendesk