Si vous avez des problèmes avec le budget d’exploration de WordPress, vous n’êtes pas seul.
Votre budget d’exploration correspond essentiellement à la fréquence à laquelle les moteurs de recherche visitent et examinent votre site. S’il est trop bas, vos pages risquent de ne pas être indexées rapidement, ce qui peut nuire à votre classement dans les moteurs de recherche et réduire votre trafic.
C’est pourquoi la gestion de votre budget d’exploration est importante si vous souhaitez améliorer la visibilité et les performances de votre site.
Chez WPBeginner, l’une de nos approches pour gérer notre budget d’exploration est de garder nos plans de site XML à jour et sans erreur en utilisant l’extension AIOSEO. Et quand il s’agit d’AIOSEO, il y a plus de fonctionnalités que vous pouvez utiliser pour corriger votre problème de budget d’exploration.
Dans cet article, nous allons décomposer le problème du budget d’exploration SEO de WordPress et vous afficher des moyens simples pour le corriger.
Comme il s’agit d’un vaste Sujet, nous l’avons divisé en sections faciles à comprendre. Voici les différents articles que nous allons aborder dans cet article :
Vous êtes prêt ? Premiers pas pour que vos pages reçoivent l’attention qu’elles méritent.
Comment fonctionne l’exploration des moteurs de recherche ?
Les moteurs de recherche comme Google utilisent des bots sophistiqués ou des programmes informatiques pour visiter les sites à travers l’internet. Ces robots recherchent les modifications apportées à votre site WordPress et les comparent à l’index de recherche principal.
Imaginons que les moteurs de recherche trouvent un nouveau contenu sur votre site. Dans ce cas, ils l’ajoutent à leur index. S’ils trouvent du contenu qui se trouve déjà dans l’index mais qui a été mis à jour, ils actualiseront l’index avec les nouvelles informations.
Les robots de recherche suivent alors tous les liens sur ce lien et répètent le processus pour ces pages.
Maintenant, les robots se déplacent d’un lien à l’autre sur une page, de la même manière que les véritables araignées rampent sur leur toile. C’est pourquoi le terme « exploration » est utilisé pour décrire cette activité, et vous pouvez parfois voir les robots appelés « moteurs de recherche ».
Pour améliorer le référencement, vous devez veiller à ce que les moteurs de recherche puissent explorer votre site facilement.
Astuce : consultez notre guide complet de référencement WordPress pour les débutants afin d’en savoir plus sur le référencement.
Qu’est-ce que le budget d’exploration SEO ?
Le budget d’exploration SEO est le nombre de fois que les moteurs de recherche comme Google vont explorer les pages de votre site.
Les robots de Google explorent des milliards de pages chaque jour et décident du nombre de pages à explorer sur chaque site WordPress afin d’utiliser leurs ressources à bon escient. Ce nombre n’est pas corrigé et il est modifié quotidiennement en fonction de divers facteurs. Aucun nombre de pages n’est donc défini pour l’exploration de votre site ou de votre blog par le robot de Google.
Cela dit, les sites plus importants, avec plus de contenu, ont généralement un budget d’exploration plus élevé, tandis que les sites plus petits ont un budget moins élevé.
D’autres facteurs influencent également le budget d’exploration, comme la popularité d’une URL, sa fraîcheur, la fréquence des mises à jour, etc.
Notez que vous pouvez perdre votre budget d’exploration sur des pages non désirées pour plusieurs raisons.
Par exemple, si votre blog WordPress n’est pas correctement optimisé, les moteurs de recherche dépenseront votre budget d’exploration sur les parties les moins significatives du blog plutôt que sur le contenu important.
De même, il se peut que vous empêchiez accidentellement les moteurs de recherche d’explorer votre site. Dans ce cas, il se peut que votre site n’utilise pas du tout le budget d’exploration.
Quelles sont les causes des problèmes de budget d’exploration de WordPress ?
La façon dont WordPress génère les URL et le contenu dupliqué peut causer des problèmes de budget d’exploration.
Par exemple, WordPress génère automatiquement des flux RSS pour différentes parties de votre site. Il existe des flux RSS pour :
- Le blog principal
- Catégories et identifiés
- Commentaires sur chaque publication et page
- Types de publication personnalisés avec des URL de flux RSS distincts et plus encore.
Les liens vers ces flux RSS sont ajoutés au code source HTML de votre site, ce qui les rend accessibles aux moteurs de recherche.
Aujourd’hui, les moteurs de recherche sont suffisamment intelligents pour reconnaître et ignorer le contenu dupliqué. Cependant, ils continueraient à les explorer et à dépenser votre budget d’exploration pour le référencement.
Outil d’importation, les moteurs de recherche exploreraient les articles moins importants plus que nécessaire. Il s’agit notamment des pages d’archives, des taxonomies, des archives d’auteurs/autrices et des fichiers PDF.
Les extensions WordPress ou d’autres outils tiers peuvent également ajouter des paramètres de requête à vos URL WordPress. Les robots d’indexation de Google peuvent considérer ces paramètres de requête comme une page différente et les explorer.
Par exemple, les paramètres UTM sont utilisés pour le suivi de Google Analytics, et une page avec ou sans ces paramètres de requête aurait toujours la même apparence.
Voici un exemple : https://yourdomain.com/landingpage/?utm_source=newsletter
Cela gaspille votre budget d’exploration SEO sur des articles moins importants et devient un problème.
Comment calculer votre budget d’exploration SEO ?
Le budget d’exploration pour le référencement n’est pas un nombre de pages défini. Il fluctue beaucoup et il n’existe aucun moyen fiable de prédire le nombre de pages que Google explorera sur votre site un jour donné.
Toutefois, vous pouvez vous faire une idée assez précise de la manière dont Google explore votre site en vous basant sur les activités d’exploration récentes.
Si vous ne l’avez pas encore fait, vous devez d’abord ajouter votre site à Google Search Console. Il s’agit d’un outil gratuit fourni par Google pour aider les propriétaires de sites web à trouver comment leur site se comporte dans la recherche Google.
Il vous suffit de vous rendre dans votre tableau de bord » Search Console « . Passez ensuite au menu « Réglages » dans la colonne de gauche et cliquez sur « Ouvrir le rapport » à côté de « Statistiques d’exploration ».
Le rapport de statistiques « Crawl » affiche une vue d’ensemble des demandes d’exploration de votre site au cours des dernières semaines.
Vous pouvez survoler le graphique pour voir combien de pages ont été demandées chaque jour.
Cela vous donne une idée du taux d’exploration moyen de votre site pendant cette période.
Vous trouverez ci-dessous une répartition des activités d’exploration par code de réponse, type de fichier, objectif et type de robot Google.
À partir de là, vous pouvez voir combien le budget d’exploration est consacré aux erreurs, à la syndication (flux RSS), au JavaScript, au CSS, aux images et à bien d’autres choses encore.
Cela vous donne un instantané des articles que vous pouvez optimiser pour utiliser le budget d’exploration SEO plus efficacement. Par exemple, si vous avez beaucoup d’erreurs 404 qui sont explorées, vous pouvez utiliser une extension de redirection pour vous assurer que ces robots d’indexation atterrissent sur du contenu utile.
(Ultérieurement dans l’article, nous vous affichons comment rediriger les erreurs d’exploration étape par étape).
Pourquoi devriez-vous vous préoccuper du budget d’exploration SEO ?
Les moteurs de recherche doivent explorer votre site efficacement pour indexer votre contenu à temps et correctement. Cependant, si votre budget d’exploration SEO est gaspillé, votre contenu important et plus récent risque de ne pas être exploré à temps.
Il peut s’écouler plusieurs semaines avant que les moteurs de recherche ne notifient les mises à jour de vos anciens articles ou ne découvrent un nouveau contenu.
Vous n’obtiendrez pas de trafic en provenance des moteurs de recherche, votre classement en matière de référencement risque de ne pas s’améliorer et vous perdrez de l’argent sur les ventes ou les recettes publicitaires.
Comment optimiser facilement le budget d’exploration SEO dans WordPress
Le moyen le plus simple et le plus sûr d’optimiser votre budget d’exploration SEO dans WordPress est d’utiliser All in One SEO for WordPress, ou AIOSEO.
C’est la meilleure extension de référencement WordPress avec un outil d’optimisation du crawl SEO intégré.
Pour Premiers pas, installons et activons avant tout le plugin All in One SEO pour WordPress. Si vous ne savez pas comment faire, vous pouvez consulter notre guide étape par étape sur l’installation d’un plugin WordPress.
Note : Il existe également une version gratuite de All in One SEO, qui comprend également une fonctionnalité de nettoyage de l’exploration. Nous vous recommandons d’utiliser l’offre PRO de l’extension payante car elle vous donnera également accès à l’outil » Gestionnaire de redirection » pour corriger les erreurs 404 sur votre site.
Une fois activée, l’extension affiche un assistant de configuration. Suivez simplement les instructions à l’écran pour définir l’extension.
Ensuite, vous pouvez vous rendre dans la section All in One SEO » Apparence de la recherche depuis votre zone d’administration WordPress.
Ensuite, vous devez passer à l’onglet « Avancé ».
Défilez ensuite vers le bas de la page jusqu’à ce que vous trouviez l’option « Crawl Cleanup ».
Cliquez sur le commutateur pour activer la fonctionnalité « Nettoyage de l’exploration ».
Maintenant, la première option que vous verrez dans le nettoyage de l’exploration est de retirer les arguments de la requête.
En dessous, vous pouvez fournir une liste d’arguments de requête que vous souhaitez permettre. Les utilisateurs/utilisatrices avancés peuvent utiliser des expressions régulières REGEX ici.
Ensuite, vous trouverez des options pour les flux RSS de WordPress. All in One SEO vous affichera toutes sortes de flux RSS générés par WordPress, et vous pourrez désactiver les flux RSS les moins importants.
Par exemple, si vous avez un blog à auteur/autrice unique, vous pouvez désactiver la fonctionnalité « Flux d’auteurs ».
Une fois que vous avez désactivé tous les flux RSS indésirables, n’oubliez pas de cliquer sur le bouton « Enregistrer les modifications » pour stocker vos Réglages.
Comment configurer des redirections pour les pages d’erreur ?
All in One SEO configure automatiquement des redirections pour les flux que vous avez désactivés. Par exemple, un flux RSS identifiant redirigera les utilisateurs/utilisatrices vers la page d’archivage des identifiants.
Vous pouvez passer à votre tableau de bord Google Search Console et ouvrir le rapport sur les statistiques d’exploration. Vous consulterez cette page avec la liste des pages qui ont donné lieu à des erreurs.
En fonction du code d’état, vous pouvez configurer des redirections pour ces pages.
Par exemple, vous pouvez rediriger les erreurs 404 vers une page similaire. Vous pouvez également vérifier les autres pages contenant des erreurs et configurer des redirections pour celles-ci.
All in One SEO permet de configurer très facilement des redirections sur votre site WordPress. Allez simplement sur la page All in One SEO » Redirects et ajoutez l’ancienne URL dans le champ ‘Source URL’ et la nouvelle URL dans le champ ‘Target URL’.
Cliquez sur le bouton « Ajouter une redirection » pour enregistrer vos réglages.
Ensuite, il vous suffit de répéter le processus pour configurer d’autres redirections si nécessaire. Pour plus de détails et d’autres méthodes, consultez notre guide sur la façon de configurer des redirections dans WordPress.
Astuce bonus : Créer un plan de site sur WordPress
Un sitemap XML est un fichier spécial qui répertorie toutes les pages de votre site dans un format que les moteurs de recherche comme Google peuvent facilement lire. Il s’agit d’une carte permettant aux moteurs de recherche de trouver et d’indexer votre contenu.
Le fait de disposer d’un sitemap XML n’améliore pas directement votre plan de site, mais il aide les moteurs de recherche à trouver et à indexer une plus grande partie de votre contenu.
Ceci est particulièrement utile pour les nouveaux sites ou les blogs sans beaucoup de liens retour, car cela aide les moteurs de recherche à découvrir toutes vos pages. Même pour les sites établis, les sitemaps mettent en évidence les pages importantes et la fréquence des mises à jour, ce qui facilite l’indexation efficace de votre contenu par les moteurs de recherche.
Pour en savoir plus sur ce Sujet, vous pouvez consulter notre guide sur ce qu’est un sitemap XML et comment en créer un dans WordPress.
Nous espérons que cet article vous a aidé à découvrir le problème du budget d’exploration SEO de WordPress et comment le corriger. Vous pouvez également consulter ces conseils d’experts sur l’utilisation de Google Search Console pour augmenter le trafic ou voir des exemples pratiques sur la façon d’améliorer le taux de clics organiques dans WordPress.
Si vous avez aimé cet article, veuillez alors vous abonner à notre chaîne YouTube pour obtenir des tutoriels vidéo sur WordPress. Vous pouvez également nous trouver sur Twitter et Facebook.
Jiří Vaněk
I have a custom 404 page set up and here, in addition to apologizing to readers, I also have links to interesting content on the site that might interest them. Can this option also help?
WPBeginner Support
A 404 page would not affect you SEO crawl budget.
Administrateur
Jiří Vaněk
Thank you for answer. I didn’t know that, so again I know something new thanks to you.
Moinuddin Waheed
This is completely new concept to and I have come to know about crawl budget and its importance.
since crawl budget is given by Google itself and index web pages on its basis, what is the criteria for large and small websites and what are factors contributing to crawl budget?
WPBeginner Support
For the moment that is not publicly shared information which is why we recommend taking a look at the Crawl report to get an idea of what you have for your site.
Administrateur
ASHIKUR RAHMAN
how can i tell google to not crawl /feed/ links? most of our post is indexed. but same or more number of postlinks/feed/ is crawling by google. in gsc these links becomes duplicate link.
WPBeginner Support
You would want to noindex your feed to prevent Google from crawling it, if you have a SEO plugin on your site, those would normally have settings to quickly noindex your feed.
Administrateur