Budget de crawl et structure interne
Le budget de crawl est le nombre de pages qu'un moteur explorera dans une période donnée. Pour les petits sites (moins de 100 pages), c'est rarement un souci. Pour les gros sites WordPress avec des milliers de pages, l'optimisation de ce budget détermine quelles pages sont indexées, à quelle vitesse les mises à jour apparaissent, et si le contenu important reçoit l'attention qu'il mérite.
Comment les liens internes affectent le crawl
Les robots naviguent en suivant les liens. La structure de liens agit comme une carte routière. Les pages avec plus de liens entrants sont re-crawlées plus fréquemment. Les pages avec moins de liens le sont moins souvent. Les pages orphelines — zéro lien entrant — représentent le pire cas : même dans le sitemap, les robots peuvent les ignorer.
Le problème de profondeur
Les robots allouent plus de ressources aux pages proches de l'accueil. Une page à 2 clics de profondeur est crawlée plus fréquemment qu'une page à 6 clics. Sur WordPress, les archives paginées poussent le contenu ancien de plus en plus profondément avec chaque nouvelle publication.
Les liens internes réduisent la profondeur effective. Un lien direct depuis une page bien connectée vers une page enfouie crée un raccourci qui contourne la chaîne de pagination.
Ce qui gaspille le budget de crawl
URLs à paramètres. WordPress et WooCommerce génèrent des URLs avec des paramètres de tri, filtrage et pagination qui n'ajoutent aucun contenu unique.
Contenu mince ou dupliqué. Archives de tags, archives de dates, archives d'auteur sur les sites mono-auteur.
Pages orphelines et profondes. Chaque page sans lien interne est une page que les robots doivent découvrir via le sitemap, consommant du budget inefficacement.
Optimisation pratique
Automatic Internal Links pour créer des liens entre contenus connexes — les robots peuvent ainsi atteindre les pages profondes par de multiples chemins. Max Links à 2-3 par page. Priorité pour le contenu pilier. Exclure les URLs de panier, caisse et pages utilitaires.