Le guide ultime des plans de sites XML

Définition

 

Un plan de site est un moyen d'organiser un site web tout en identifiant les URL et les données sous chaque section. Le document XML contient des instructions pour les robots des moteurs de recherche.

 

De même, un plan de site peut être défini comme une représentation schématique qui montre comment les sous-pages sont disposées sous les regroupements parents. Ce type de diagramme constitue la carte d'un site. Ce plan est un fichier XML qui permet aux robots des moteurs de recherche d'indexer un site. Les plans de sites peuvent également être définis comme une démonstration de la disposition de la navigation et de la manière dont le contenu est organisé sur un site Web.

 

La signification des plans de sites

 

Les sites web ne cessent d'augmenter en taille et en complexité. Par exemple, un site comme Amazon compte probablement des milliers de pages et peut-être des millions de produits. Dans quelle mesure les robots des moteurs de recherche peuvent-ils facilement explorer un tel site ? Comment fonctionne réellement le référencement ?

 

Amazon est peut-être un exemple extrême. Prenons plutôt le cas d'un site Web d'entreprise. La page d'accueil donne une vue d'ensemble de l'entreprise, des produits ou services qu'elle propose, des informations de contact, un blog et peut-être des informations sur l'équipe. Chacun de ces éléments est expliqué plus en détail sur des pages distinctes et chaque page comporte probablement des sous-sections plus petites.

 

Dans le cas d'un blog, il peut y avoir un texte d'ancrage qui renvoie à d'autres sections du site en plus du contenu déjà fréquemment mis à jour, parfois plusieurs fois par jour pour les sites d'information. Qu'en est-il des liens qui pointent vers d'autres sites ou pages Web ? Qu'en est-il des forums de discussion dans lesquels un sujet particulier peut susciter des centaines de commentaires et de liens vers d'autres sites ?

Source de l’image : Junto

 

Inutile de dire que les sites Web peuvent devenir assez complexes. Les moteurs de recherche commençaient à ne plus pouvoir suivre les structures complexes. Certaines pages, en particulier les pages dynamiques, étaient sans cesse négligées.

 

Contrairement à la croyance populaire, les plans de sites ne sont pas un outil d'optimisation des moteurs de recherche ; ils n'affectent pas non plus le classement. Ils visent plutôt à aider les moteurs de recherche à effectuer des classements et des recherches précis.

 

Pour résoudre ce problème, Google a développé en 2005 un protocole plan de site connu sous le nom de protocole Plan de site 0.84. Il s'agit d'un protocole XML qui a été publié sous une licence Creative Commons. Cela a permis à d'autres moteurs de recherche de le prendre en charge. Les développeurs de sites Web n'ont donc pas besoin de créer différents types de plan de site. Il leur suffit de créer un seul fichier à soumettre et de le mettre à jour lorsque des modifications sont apportées au site.

 

Pourquoi est-il important d'avoir des plans de sites ?

 

Bien que la réponse à cette question ressorte clairement de l'exposé ci-dessus sur les plans de sites, voici quelques raisons spécifiques pour lesquelles les plans de sites sont importants :

Ils aident les robots des moteurs de recherche à indexer toutes les pages d'un site Web

Les robots des moteurs de recherche ignoraient auparavant les pages dynamiques. Le protocole XML, en revanche, a permis aux robots de suivre les URL de manière plus efficace. En effet, les informations nécessaires sont placées sur une seule page. Étant donné que le XML contient également un résumé de la fréquence de mise à jour d'un site Web et conserve un enregistrement des modifications apportées, il devient plus facile pour les robots d'explorer les pages Web et les URL. Les données dont les moteurs de recherche ont besoin sont toutes accessibles en un seul endroit, ce qui permet de passer moins de temps sur un site Web (n'oubliez pas que les robots ont des millions de sites à explorer).

 

Les plans de sites permettent aux robots des moteurs de recherche d'explorer même les URL qui ne sont pas découvertes par le processus d'exploration normal.

Une navigation plus aisée

Nous avons mentionné précédemment que les plans de sites étaient initialement destinés aux utilisateurs. Lorsqu'un plan de site est conçu pour les utilisateurs, il s'agit généralement d'une liste de pages Web ou même d'outils de planification de la conception Web présentant une disposition hiérarchique, apparaissant au format HTML. Le plan du site peut répertorier toutes les pages de votre site. Toute mise à jour de votre site doit être ajoutée au plan de site (par exemple, de nouvelles images, vidéos, pages et tout autre contenu).

 

Lorsque vous avez un plan de site sur votre site, il est plus facile pour un visiteur de trouver une page ou un sujet particulier. En effet, vous organisez votre contenu par thème ou par catégorie. Le plan du site vous aide à organiser votre contenu de manière à ce que le contenu principal se trouve près de la page d'accueil pour être facilement accessible. Le plan du site contient un texte d'ancrage qui pointe vers les parties les plus importantes de votre site. Les visiteurs peuvent utiliser le plan du site pour localiser un sujet en naviguant dans les menus ou en effectuant une recherche sur le site.

 

Un plan de site HTML est également utile pour permettre à vos visiteurs de savoir en quoi consiste votre site Web. Si votre plan du site contient un grand nombre de liens, vous pouvez les répartir en plusieurs pages. Lorsque les visiteurs peuvent facilement trouver ce qu'ils cherchent, ils passent plus de temps sur votre site, s'engagent dans davantage de sessions et visitent peut-être même un grand nombre de pages par session si votre contenu est de qualité. En fin de compte, vous aurez également des visiteurs réguliers et des conversions.

 

Vous vous demandez peut-être pourquoi vous avez besoin d'un plan de site au lieu de vous concentrer sur la création d'une bonne ergonomie pour les visiteurs de votre site Web. La vérité est qu'il est difficile d'atteindre une UX à 100 %. De temps en temps, les utilisateurs se mettent à chercher un site interne ou à retaper une requête, voire à chercher des éléments de navigation pour essayer de localiser une page ou un sujet particulier - c'est là que les plans de site interviennent.

Un développement Web plus facile

Comme nous l'avons vu précédemment, Google a développé le protocole Plan de site 0.84 sous une licence Creative Commons. Il s'agissait d'encourager les autres moteurs de recherche à adopter le protocole, comme Yahoo et Microsoft ont accepté de le faire peu après. En conséquence, le plan de site a été mis à jour à la version 0.9 et les trois concurrents ont conjointement sponsorisé un site pour expliquer le protocole en détail. Voir ici.

 

Qu'est-ce que cela signifie pour les développeurs ? Cela signifie que le protocole est reconnu par les principaux moteurs de recherche. Les développeurs web ne doivent donc pas créer différents types de plans de sites pour chaque moteur de recherche. Il leur suffit de créer un seul fichier et de le soumettre, puis de le mettre à jour dès que des modifications sont apportées à un site.

 

Au fil du temps, le plan de site XML deviendra la norme pour tous les développements de sites web ; par conséquent, il sera plus facile d'ajouter des pages supplémentaires, des fichiers multimédias ou des blogs à un site. Mieux encore, toute mise à jour d'un site sera vue par les trois moteurs de recherche, ce qui élimine la nécessité de mettre à jour ces informations trois fois pour répondre aux besoins de trois moteurs de recherche différents.

 

Ask.com a également commencé à prendre en charge les plans de sites XML. Une récente mise à jour du protocole XML Plan de site a permis à Ask.com d'« indiquer » aux moteurs de recherche l'emplacement du plan de site d'un site en plaçant une entrée dans le fichier robots.txt.

 

Quand faut-il utiliser les plans de sites ?

 

En général, si les pages Web sont correctement reliées, les robots d'exploration des moteurs de recherche sont capables de découvrir la plupart des parties du site. Toutefois, si vous disposez d'un plan de site, l'exploration sera plus facile et plus efficace. Examinons quelques cas où vous avez besoin de plans de sites :

 

• Lorsque votre site est très volumineux, il est possible que les robots des moteurs de recherche négligent certains éléments de votre site, notamment les pages récemment mises à jour ou les nouvelles pages.
• Lorsque votre site est nouveau et comporte peu de liens externes, les robots des moteurs de recherche explorent le Web en suivant les liens d'une page à l'autre. Lorsque votre site est nouveau et ne comporte aucun lien, les moteurs de recherche peuvent ne pas explorer vos pages du tout.
• Lorsqu'il existe de nombreuses archives de pages de contenu isolées ou mal reliées, vous devez répertorier les pages qui ne sont pas naturellement liées les unes aux autres sur un plan de site.
• Vous utilisez des annotations compatibles avec les plans de sites (contenu rich media ou contenu affiché dans Google Actualités) - Google est en mesure de prendre en compte les informations supplémentaires des plans de sites et de les afficher dans les résultats de recherche.

 

Il est important de noter que le fait de disposer d'une plan de site ne signifie pas que tous les éléments répertoriés seront effectivement explorés et indexés. Cependant, les avantages d'un plan de site sont nombreux, et nous en avons déjà parlé.

 

Création d'un plan du site

 

Avant de commencer, regardons l'image d'un plan du site :

 

Cela semble assez compliqué, n'est-ce pas ? La bonne nouvelle est que vous n'avez pas besoin de savoir coder pour mettre en place un plan de site. Nous allons examiner ci-dessous les différentes options de création de plans de sites :

 

Utilisation d'un système de gestion de contenu

 

Si vous utilisez un système de gestion de contenu comme WordPress, vous pouvez générer des plans de sites automatiquement à l'aide de plugins comme Yoast SEO.

Ajout d'un plan de site à WordPress

Nous allons nous concentrer sur la façon d'ajouter un plan de site à WordPress via Yoast SEO. Lorsque vous utilisez ce plugin, l'index plan de site est mis à jour automatiquement lorsque vous ajoutez ou supprimez du contenu. Les types de post que vous souhaitez indexer sont également inclus. Notez que les types d'articles marqués «  noindex  » n'apparaîtront pas dans le plan de site.

 

Pour créer votre plan du site à l'aide de Yoast :

 

• Connectez-vous à votre compte WordPress et accédez à votre tableau de bord.
• Cliquez sur « SEO » dans le menu latéral de gauche.

 

Les paramètres de référencement s'étendent pour vous offrir plus d'options.

 

• Choisissez « General ».
• Cliquez sur les caractéristiques.
• Basculez le « XML sitemaps » pour passer à « on ».
• Enregistrez les modifications.

 

Cela permettra d'activer le plan de site XML.

Visualiser le plan du site

• Connectez-vous à votre compte WordPress et accédez au tableau de bord.
• Cliquez sur « SEO » dans le menu latéral de gauche.

 

Les paramètres de référencement s'étendent pour vous offrir plus d'options.

 

• Cliquez sur « General » puis sélectionnez l'onglet « Features ».
• Pour afficher votre plan de site, cliquez sur le point d'interrogation situé à côté du bouton XML plans de sites.

 

En utilisant All in One SEO, vous devez aller dans All in One SEO > Feature Manager et activer les XML Plans de sites :

 

Le plan Plan de site XML apparaîtra alors dans les paramètres de All in One SEO :

 

En fonction des besoins de votre site, vous pouvez cliquer sur l'icône d'aide ? pour en savoir plus sur ce que vous pouvez faire pour chaque paramètre. Nous vous recommandons de laisser la case à cocher pour :

 

• Créer un plan de site compressé
• Lien à partir de Virtual Robots.txt
• Générer dynamiquement un plan du site

 

Où se trouve le plan du site de Wix ?

 

Les sites Wix ont des plans de site qui sont générés dynamiquement sur leur serveur, et ils sont automatiquement mis à jour lorsque des pages ou du contenu sont ajoutés ou supprimés de votre site. Ces plans de sites ne sont pas modifiables.

 

Dois-je générer un plan de site pour Shopify ?

 

Toutes les boutiques Shopify ont un fichier plan de site.xml généré automatiquement. Ce fichier contient des liens vers tous les produits, pages, articles de blog, images de produits et collections. Vous devez localiser votre fichier plan de site dans le répertoire racine du nom de domaine principal de votre boutique (par exemple, suescollection.com/plan de site.xml), puis le soumettre à Google Search Console. Nous examinerons ce processus un peu plus loin dans l'article.

 

Utilisation d'autres outils pour générer un plan de site

 

Vous pouvez valider votre plan de site actuel en utilisant notre outil de validation de plan de site. Vous pouvez voir si votre plan de site comporte des erreurs afin de déterminer si vous devez en générer un nouveau :

 

Pour vous aider à générer un plan de site, voici quelques outils que vous pouvez utiliser, notamment SEOptimer Plan de site Generator et XML-plans de sites.com. Voyons comment vous pouvez utiliser ces deux outils :

Utilisation de XML-plans de sites.com

• Allez sur https://www.xml-plans de sites.com/
• Copiez l'URL de votre site web
• Collez-le sur le site web
• Cliquez sur « démarrer ».
• Patientez pendant que votre site Web est exploré. Remarque : si votre site Web comporte plus de 500 URL, vous devrez créer un compte payant.
• Une fois que le robot d'exploration a terminé, cliquez sur « view plan de site details », puis téléchargez le fichier .XML.

 

À ce stade, il est utile de revoir vos plans de sites pour résumer tout problème sur votre site. Vous pouvez, par exemple, trouver un problème comme des liens brisés. Examinons cela de plus près. Les liens brisés peuvent en fait empêcher votre site d'être totalement indexé, car les moteurs de recherche les considèrent comme des impasses. Les liens brisés suggèrent qu'il n'y a plus d'information, alors qu'en réalité, l'information est simplement inaccessible. Les liens brisés peuvent également nuire à la réputation d'un site et augmenter votre taux de rebond.

 

• Après avoir vérifié l'absence d'erreurs dans vos plans de sites, vous devez télécharger le plan de site dans le dossier racine du domaine de votre site Web.
• Ensuite, ouvrez la Google Search Console et ajoutez l'URL de votre plan de site .

Utilisation du générateur de Plan de site de SEOptimer

• Pour générer un plan du site, vous devez entrer votre site web :

• Que vous modifiiez ou créiez un nouveau plan du site,
• Vous pouvez également avoir besoin d'ajouter des informations, telles que la date de dernière modification, la fréquence à laquelle vos pages sont susceptibles d'être modifiées et la priorité de vos URL.
• Sélectionnez le nombre de pages de votre page (jusqu'à 5 000).
• Cliquez sur le bouton "Generate Plan de site".

• Vous pouvez voir que le robot d'exploration a fini d'explorer votre site :

• Vous pouvez soit cliquer sur Enregistrer le fichier XML, soit le copier dans le presse-papiers et l'ajouter à votre fichier actuel ou télécharger votre fichier plan de site XML nouvellement créé.

 

Vous devrez valider votre plan de site à l'aide de SEOptimer Plan de site Validator, une fois que vous aurez téléchargé votre plan de site sur votre site Web. Vous devez ensuite soumettre votre plan de site à Google Search Console. La soumission aux Bing Webmaster Tools est également une bonne idée. Voyons maintenant comment faire ces deux choses :

 

Comment ajouter un plan Plan de site à Google Search Console

 

Vous venez de télécharger votre plan du site dans votre répertoire racine. L'emplacement de votre plan du site doit être https://mywebsite.com/plan de site.xml.

 

Pour le télécharger dans Google Search Console, vous devez vous connecter à Search Console, aller dans « Index » puis sélectionner « plans de sites ». Cliquez sur « add/test Plan de site ». Saisissez l'URL du plan de site. Cliquez sur « Soumettre ».

 

Comment ajouter un plan Plan de site aux outils pour webmasters de Bing ?

 

Pour enregistrer votre plan de site dans les outils pour webmasters de Bing, confirmez que le plan de site XML que vous avez téléchargé sur votre site a bien fonctionné et que l'URL se charge.

 

• Connectez-vous à Bing Webmaster Tools
• Cliquez sur « Configurer mon site ».
• Cliquez sur « Plans de sites ».
• Saisissez l'URL de votre plan de site dans la zone de texte intitulée « soumettre un plan de site ».
• Cliquez sur « soumettre ».

 

Quelles sont les meilleures pratiques à utiliser lors de la création d'un plan de site ?

Testez toujours vos plans de sites avant de les soumettre

Testez toujours votre plan de site avant de le soumettre pour vous assurer que les erreurs éventuelles sont résolues.

 

Voici comment tester votre plan de site :

 

• Cliquez sur « ajouter/tester un plan de site » sur la page d'accueil des rapports dans Google Search Console.
• Saisissez l'URL du plan du site dans la boîte de dialogue et cliquez sur Test.
• Cliquez sur « Ouvrir les résultats » une fois le test terminé pour vérifier s'il y a des erreurs.
• Vous pouvez ensuite soumettre.

Donnez la priorité aux pages de haute qualité dans votre Plan de site

Votre plan de site ne doit pas diriger les robots des moteurs de recherche vers des pages de faible qualité, car cela pourrait être considéré comme le signe d'un site ayant une valeur minimale pour les visiteurs. Donnez la priorité aux pages hautement optimisées, aux images, aux vidéos, au contenu unique et aux autres pages qui suscitent l'engagement des utilisateurs sur votre plan du site.

Ne modifiez les délais de modification que lorsque vous avez apporté des changements substantiels

Une technique de référencement clandestine consiste à modifier les heures de modification afin de faire croire aux robots des moteurs de recherche que vous avez mis votre site à jour de manière significative. Google peut supprimer vos horodateurs si vous agissez de la sorte.

N'utilisez que des versions canoniques des URL dans votre Plan de site

Si vous avez utilisé la balise rel=canonical pour différencier les pages qui sont très similaires, n'incluez que celles-ci dans votre plan de site. Si vous n'avez pas utilisé la balise, vous devez l'utiliser pour distinguer les pages qui sont similaires (par exemple, les pages de produits) et n'utiliser que la version canonique dans votre plan de site à l'avenir.

Faites en sorte que votre fichier plan de site soit petit

Si votre plan de site est de petite taille, il ne sollicitera pas votre serveur. La taille des plans de sites a été portée à 50 Mo par Google et Bing.

Utilisez le fichier robots.txt pour les pages que vous ne voulez pas indexer

L'utilisation d'un plan de site ne signifie pas que vous devez indexer chaque page. Les pages telles que les pages de remerciement ne doivent pas être indexées, même si elles figurent sur le plan du site. Vous devez utiliser la balise meta robots « noindex, follow » pour préserver votre capital de liens même si cette page particulière ne sera pas indexée.

 

Il y a des moments où vous pouvez utiliser robots.txt pour bloquer des pages. C'est notamment le cas lorsque votre budget de crawl est rapidement épuisé. Qu'est-ce qu'un budget d'exploration ? Il s'agit du nombre de fois qu'un robot de moteur de recherche explore votre site au cours d'une période donnée. Si votre site est exploré 32 fois par jour, par exemple, il est possible que votre budget d'exploration mensuel soit de 960 fois.

 

Vous pouvez voir votre budget de crawl sous « crawl stats » dans la console de recherche.

Si vous avez plus de 50 000 URL, créez plusieurs plans de sites

Un plan de site est limité à 50 000 URL. C'est suffisant pour la plupart des sites. Si vous avez un site de grande taille, comme les sites de commerce électronique, vous devrez créer plus d'un plan de site.

Évitez d'inclure des URL « noindex » dans votre Plan de site

Si vous ne souhaitez pas que certaines pages soient explorées, il est plus judicieux de ne pas les inclure dans le plan du site que d'ajouter une balise « noindex ». Cette balise envoie des informations contradictoires au robot du moteur de recherche, suggérant que la page doit être indexée ou non. Cette incohérence gaspille votre budget de crawl.

Si vous avez un grand site, créez des plans de sites dynamiques

Si votre site est assez vaste, vous devez établir des règles qui vous aideront à déterminer quand une page peut être incluse dans votre plan du site ou passer de « noindex » à « indexfollow ». Il peut être utile d'utiliser un outil permettant de générer un plan du site XML dynamique.

Combiner Plans de sites XML et flux RSS/Atom

Les flux RSS/Atom permettent d'informer les moteurs de recherche de la mise à jour du contenu de votre site et facilitent l'accès au nouveau contenu pour les moteurs de recherche et les utilisateurs.

Autres conseils

• Veillez à ce que la structure de votre site soit fluide de gauche à droite, car les gens cliquent intuitivement de gauche à droite.
• Utilisez des noms simples pour vos pages, tels que « produits » et « services ».
• Votre menu doit apparaître sur chaque page.
• Votre menu doit figurer en haut de la page et énumérer la page de navigation principale.
• Utilisez des sous-catégories pour que votre menu reste simple.

 

En conclusion

 

Les plans de sites facilitent l'indexation et l'exploration de votre site par les moteurs de recherche. Ils permettent également aux utilisateurs de naviguer plus facilement sur votre site. Ainsi, lorsque vous mettez à jour le contenu, les moteurs de recherche et les utilisateurs trouveront facilement le nouveau matériel. Qu'est-ce que cela signifie ? Que vous avez plus de chances d'être bien classé et d'avoir une bonne réputation visuelle, ce qui se traduit par un plus grand nombre de nouveaux visiteurs et par des conversions.