Crawl
exploration par les robots
Le crawl est l’exploration automatique du web par les robots des moteurs, qui suivent les liens pour découvrir et revisiter les pages.
Ce que cela veut dire
Sans exploration, une page a peu de chances d’être indexée. Des liens internes clairs et une navigation accessible facilitent ce travail.
Un site lent, des redirections en chaîne ou de nombreuses erreurs peuvent gêner l’exploration, surtout sur un grand site.
Un exemple concret
Une page sans aucun lien depuis le reste du site est plus difficile à découvrir, même si elle est correctement publiée.
Termes liés
Indexation
L’indexation est l’étape où un moteur de recherche analyse une page et l’enregistre dans sa base, afin de pouvoir l’afficher dans ses résultats.
Robots.txt
Le fichier robots.txt indique aux robots quelles parties d’un site ils peuvent explorer.
Maillage interne
Le maillage interne est l’ensemble des liens qui relient les pages d’un même site entre elles.
Vous préparez un site ou une refonte ? Je vous aide à faire les bons choix, de la conception au référencement.
