Crawler

Un crawler peut aussi être appelé robot d’indexation. Les moteurs de recherche comme Google disposent tous de crawlers qui parcourent les sites du monde entier afin de collecter toutes les informations nécessaires à la création de l’index et au positionnement des sites internet sur les moteurs de recherche.