Glossary
Budget de crawl
L’ensemble des URL que Google peut et veut explorer sur un site. Une vraie contrainte sur les très gros sites, rarement sur les petits.
Le budget de crawl, ou budget d’exploration, est l’ensemble des URL que Google peut et veut explorer sur un site. Il dépend de deux choses : la limite de capacité d’exploration, soit ce que votre serveur supporte, et la demande d’exploration, soit ce que Google veut récupérer.
Le guide de Google s’adresse aux sites de plus d’un million de pages environ mises à jour chaque semaine, ou de 10 000 pages modifiées chaque jour. Sur un site plus petit, une page laissée de côté est rarement une question de budget : regardez d’abord ses liens internes et sa qualité.