Nombre d’URLs que les robots de Google peuvent explorer sur un site
Crawl budget c’est le nombre total d’URL que les moteurs de recherche peuvent et veulent explorer sur un site internet au cours d’une période donnée. C’est un facteur très important pour le référencement naturel.
Si un site contient moins de quelques milliers d’URL, la plupart du temps, il sera analysé efficacement. Donc, les webmasters ne doivent pas s’inquiéter du crawl budget.
Googlebot est conçu pour être un moyen efficace d’indexer les pages. Crawling est sa priorité principale, tout en veillant à ne pas dégrader l’expérience des utilisateurs.
En termes simples, le crawl budget représente le nombre de connexions parallèles simultanées que Googlebot peut utiliser pour analyser le site, ainsi que le temps qu’il doit y passer.
Facteurs affectant le crawl budget
Le taux d’analyse peut monter et descendre en fonction de quatre facteurs.
- Analyse de la rapidité. Si le site répond très rapidement pendant un certain temps, la limite augmente, ce qui signifie que davantage de connexions peuvent être utilisées pour l’exploration. Si le site rame ou répond avec des erreurs de serveur, la limite diminue et Googlebot analyse moins de pages.
- Demande d’exploration. Même si le crawl budget n’est pas atteint, l’activité de Googlebot sera faible, s’il n’y a pas de demande d’indexation.
- Popularité du site. Le facteur le plus important dans la détermination de la demande d’exploration est la popularité de site. Ainsi, les URL plus populaires sur Internet ont tendance à être explorées plus souvent afin de les actualiser.
- Pages de qualité médiocre. Le fait d’avoir de nombreuses URL à faible valeur ajoutée peut avoir un impact négatif sur l’analyse et l’indexation d’un site. Le gaspillage de ressources serveur sur des pages a un contenu médiocre stoppera l’activité d’analyse des pages qui ont réellement une valeur. Ceci peut endommager considérablement l’indexation de contenu de qualité sur un site web.
Souhaitez-vous en savoir plus sur la création de site internet efficace ? Avez-vous un projet web à réaliser ? Nous serons ravis de vous accompagner dans la réalisation de votre projet digital.