Crawl (exploration)
Le crawl est le parcours automatique d’un site de lien en lien, par les robots des moteurs ou par des outils d’audit qui les imitent. Il révèle le site tel que les machines le voient — souvent différent de ce qu’on croit.
Dans la pratique
Le crawl d’audit détecte l’invisible à l’œil : chaînes de redirections, pages orphelines, titres dupliqués, profondeurs excessives. Sur les sites volumineux, on crawle par segments et l’on compare aux journaux serveur : ce que l’outil atteint mais que Googlebot ignore, et inversement, dessine la carte des vrais problèmes.