robot d’indexation

Dans le monde de l’informatique, le crawling désigne les termes de robot d’indexation du web. Il s’agit d’un logiciel permettant d’améliorer la visibilité du site. L’idée est d’extraire le maximum d’informations possible afin de résoudre les éventuels problèmes du site, notamment la méta duplication des balises. Ainsi, le crawling consiste à parcourir les pages du […]