Budget de crawl
Le budget de crawl est la quantité de pages qu’un moteur accepte d’explorer sur un site pendant une période donnée. Il dépend de la santé technique du serveur et de l’intérêt que le moteur porte au domaine.
Dans la pratique
En dessous de quelques milliers de pages, le sujet est marginal. Au-delà — notre moteur en gère 226 000 — il devient central : chaque URL inutile explorée (filtres, doublons, paramètres) retarde l’indexation des pages qui comptent. Sitemaps segmentés, pagination propre et temps de réponse courts orientent le robot vers l’essentiel.