L'indexation d'un site web est une partie extrêmement importante de l'optimisation des moteurs de recherche (SEO). Il est essentiel de veiller à ce que les moteurs de recherche puissent indexer votre site. Si ce n'est pas le cas, votre site ne sera pas classé dans les résultats de recherche, ce qui vous privera de trafic, de prospects et de conversions.
C'est pourquoi nous vous proposons ce guide 101 complet sur l'indexation des sites web, qui couvre tout ce que vous devez savoir. Commençons par le commencement !
- Qu'est-ce que l'indexation d'un site web ?
- 9 bonnes pratiques pour être indexé
- 4 raisons pour lesquelles votre site n'est pas indexé (et comment y remédier)
Qu'est-ce que l'indexation d'un site web ?
L'indexation d'un site web est le processus par lequel les moteurs de recherche identifient les pages web sur Internet et stockent les données de ces pages dans leur base de données afin de les prendre en compte dans les futurs résultats de recherche.
On peut comparer l'indexation à une bibliothèque. Un moteur de recherche comme Google découvre un livre (une page web) et l'ajoute à son étagère (sa base de données). Ensuite, lorsque quelqu'un recherche un sujet (une requête), Google peut choisir une poignée de livres (résultats de recherche) à lui proposer.
Votre site web doit être indexé par les moteurs de recherche pour que vos pages soient classées dans les résultats de recherche.
Comment fonctionne l'indexation d'un site web ?
Les moteurs de recherche utilisent des robots d'exploration, parfois appelés "bots" ou "spiders", pour parcourir les pages web sur l'internet. Lorsqu'un crawler trouve une page, il stocke les informations essentielles la concernant, telles que sa copie, son titre et sa méta-description, et envoie ces informations au moteur de recherche.
Le moteur de recherche indexe ensuite la page web en stockant ces informations dans sa base de données. Il utilise ensuite les pages de sa base de données pour proposer des sites web pertinents dans les résultats de recherche lorsqu'un utilisateur saisit une requête.
Si un moteur de recherche ne peut pas explorer votre page ou votre site web, il empêchera les moteurs de recherche de l'indexer, ce qui signifie que votre site ne sera pas classé dans les résultats de recherche.
9 bonnes pratiques pour être indexé
Comment s'assurer que les moteurs de recherche indexent vos pages ? En fin de compte, il s'agit de faciliter l'exploration de votre site par les moteurs de recherche. Il existe de nombreuses façons d'y parvenir, mais il faut commencer par suivre ces neuf meilleures pratiques pour se faire indexer !
- Envoyez votre sitemap à Google
- Ajoutez des liens internes sur l'ensemble de votre site web
- Assurez-vous que votre contenu vaut la peine d'être indexé
- Demander à Google d'indexer des URL individuels
- Optimisez la vitesse de chargement de vos pages
- Améliorer le temps de réponse de votre serveur
- Supprimer le contenu en double
- Trouver et réparer les liens brisés
- Réduire les redirections sur votre site
1. Soumettez votre sitemap à Google
L'un des meilleurs moyens de garantir l'indexation de vos pages est de soumettre votre sitemap à Google. En soumettant votre sitemap, vous donnez à Google une feuille de route complète de votre site avec chacune de vos URL.
Cela signifie que Google peut identifier et indexer vos pages facilement.
Pour soumettre votre sitemap à Google, suivez les étapes suivantes :
- Rendez-vous sur Google Search Console
- Cliquez sur Sitemaps dans la rubrique Indexation du menu latéral gauche.
- Entrez votre URL
- Cliquez sur soumettre
2. Ajouter des liens internes sur l'ensemble de votre site web
Les robots des moteurs de recherche parcourent les sites web en passant entre les liens des pages. Comme nous l'avons déjà mentionné, les moteurs de recherche doivent pouvoir explorer votre site pour que les moteurs de recherche puissent indexer vos pages.
C'est pourquoi il est essentiel d'ajouter des liens internes sur l'ensemble de votre site web. Sans eux, il est difficile pour les robots d'indexation de parcourir et d'indexer vos pages avec précision.
Vous pouvez ajouter plusieurs types de liens internes :
- Navigation : Les liens de navigation apparaissent dans la navigation ou dans le pied de page.
- Barre latérale : les liens de la barre latérale apparaissent dans les barres latérales de droite ou de gauche ou au bas du contenu.
- Contextuels : les liens contextuels apparaissent dans votre contenu écrit.
Votre contenu doit comporter trois à cinq liens de retour internes. Vos URL les plus importantes doivent comporter des liens de navigation afin de démontrer leur importance à Google et de faciliter au maximum la navigation sur votre site web pour les utilisateurs.
3. Veillez à ce que votre contenu mérite d'être indexé
L'objectif principal de tout moteur de recherche est d'offrir à ses utilisateurs une expérience agréable. Pour ce faire, le moteur de recherche doit proposer un contenu pertinent et utile qui réponde aux questions des utilisateurs et leur fournisse les informations dont ils ont besoin.
Si les moteurs de recherche ne pensent pas que votre page est utile ou précieuse pour les utilisateurs, il se peut qu'ils ne l'indexent pas, même si vous avez soumis un sitemap. Les pages à faible contenu ou les pages qui renvoient simplement à d'autres pages de votre site (comme la pagination de votre blog) sont souvent celles que les moteurs de recherche n'indexent pas.
Voici quelques conseils pour vous aider à rédiger un contenu de qualité et utile :
- Écrire pour les gens, pas pour les moteurs de recherche
- Fournir des informations, des rapports et des recherches originaux
- Fournir une description complète et détaillée du sujet
- Rédigez des titres descriptifs qui résument avec précision le sujet de votre page.
- Mettez en valeur votre expertise ou votre connaissance du secteur
4. Demander à Google d'indexer des URL individuelles
La prochaine étape de notre liste de bonnes pratiques en matière d'indexation de sites web consiste à demander l'indexation à Google. En effet, vous pouvez simplement demander à Google d'indexer votre URL. Vous pouvez simplement demander à Google d'indexer votre URL.
Et c'est assez facile à faire.
Voici comment demander l'indexation à Google :
- Accéder à Google Search Console
- Cliquez sur l'outil d'inspection d'URL dans le menu latéral gauche.
- Saisissez l'URL de la page que vous souhaitez voir indexée
- Cliquez sur Demande d'indexation
S'il y a une raison pour laquelle Google préfère ne pas indexer cette page, il vous l'indiquera souvent. Parfois, il s'agit d'un simple problème technique qui vous empêche d'indexer la page, et Google vous en informera dans les détails.
5. Optimisez la vitesse de chargement de vos pages
Croyez-le ou non, les robots des moteurs de recherche n'ont pas toute la journée pour explorer et indexer vos pages. Les robots d'indexation s'en tiennent à un budget d'indexation, c'est-à-dire au nombre de pages d'un site web que les moteurs de recherche vont indexer dans un certain délai.
Si le chargement de votre site web est trop long, les robots d'indexation risquent de ne pas avoir le temps de parcourir et d'indexer toutes vos pages.
C'est pourquoi il est essentiel de veiller à ce que la vitesse de chargement des pages soit aussi rapide que possible afin que les moteurs de recherche puissent indexer avec succès toutes vos pages.
Utilisez l'outil PageSpeed Insights de Google pour visualiser rapidement le temps de chargement actuel de votre site et obtenir des recommandations pour l'améliorer.
6. Améliorer le temps de réponse de votre serveur
Tous les robots des moteurs de recherche peuvent mettre à mal votre site web, d'où l'importance d'avoir un serveur performant.
Si le temps de réponse de votre serveur est lent ou s'il est sujet à des erreurs constantes, les robots des moteurs de recherche peuvent avoir du mal à explorer et à indexer votre site web.
Utilisez le rapport sur l'état de l'hôte de Google Search Console pour vérifier facilement le temps de réponse de votre serveur. Nous vous recommandons de viser un temps de réponse inférieur à 300 millisecondes.
7. Supprimer le contenu en double
Le contenu dupliqué perturbe les robots d'indexation des moteurs de recherche et peut les amener à ne pas indexer la bonne page. C'est pourquoi la suppression du contenu dupliqué est la prochaine étape de notre liste de meilleures pratiques en matière d'indexation de sites web.
Vous pouvez rapidement trouver du contenu dupliqué en accédant à votre rapport Crawl Stats dans Google Search Console et en recherchant les balises dupliquées. Ensuite, supprimez tous les cas de contenu dupliqué que vous trouvez afin d'optimiser votre site web pour l'exploration et l'indexation par les moteurs de recherche.
8. Trouver et réparer les liens brisés
Les liens brisés provoquent des erreurs et peuvent également perturber les robots d'indexation des moteurs de recherche, ce qui rend plus difficile l'exploration et l'indexation de vos URL.
Il est conseillé de trouver et de corriger ces liens brisés le plus rapidement possible afin d'éviter tout problème d'indexation.
"Le pipeline d'indexation de Google ne prend pas en compte les URL qui renvoient un code d'état 4xx pour l'indexation, et les URL qui sont déjà indexées et qui renvoient un code d'état 4xx sont supprimées de l'index".
Utilisez un outil comme Screaming Frog ou le rapport Crawl Stats de Google Search Console pour trouver facilement les erreurs 404 sur votre site. Une fois que vous les avez trouvées, veillez à rediriger ces URL, à les mettre à jour ou à les supprimer complètement de votre site.
Il est également judicieux de prévoir un moment pour vérifier régulièrement si votre site ne contient pas de liens brisés, afin de pouvoir y remédier rapidement.
9. Réduire les redirections sur votre site
Les redirections sont courantes et presque tous les sites web les utilisent. Mais cela ne veut pas dire qu'ils ne posent pas leur lot de problèmes.
Si vous avez modifié l'URL de l'une de vos pages principales, mais que vous n'avez pas mis à jour les liens pointant vers elle, vous constaterez que Google a plus de mal à indexer l'URL mise à jour.
D'autre part, il peut être facile de faire une erreur lorsqu'il s'agit de rediriger des URL, et les robots d'indexation des moteurs de recherche n'y réagiront pas bien.
Les redirections dirigent les utilisateurs d'une page de votre site vers une page plus récente ou plus pertinente. L'une des erreurs les plus courantes dans l'utilisation des redirections est de créer accidentellement une boucle de redirection. Une boucle de redirection se produit lorsque vous dirigez les utilisateurs vers une page, puis que cette page les dirige vers une autre page, et ainsi de suite.
Elle est source de confusion tant pour les utilisateurs que pour les robots d'indexation des moteurs de recherche et peut entraîner une mauvaise indexation de vos pages par les moteurs de recherche.
Utilisez un outil comme Screaming Frog pour afficher un rapport sur les redirections de votre site, vérifiez que chacune d'entre elles dirige les utilisateurs vers une page pertinente et supprimez les boucles de redirection.
4 raisons pour lesquelles votre site n'est pas indexé (et comment y remédier)
Vous ne savez pas pourquoi les moteurs de recherche n'indexent pas votre site ?
Voici quatre raisons courantes pour lesquelles votre contenu n'est pas indexé et comment y remédier !
- Votre site n'est pas optimisé pour les utilisateurs mobiles
- Votre contenu n'est pas conforme aux critères de recherche de Google.
- Vous n'avez pas de plan du site
- Votre fichier robots.txt empêche les robots des moteurs de recherche d'explorer votre site web.
1. Votre site n'est pas optimisé pour les utilisateurs mobiles
S'assurer que votre site web est adapté aux mobiles n'est pas seulement important pour créer la meilleure expérience utilisateur sur votre site, mais aussi pour qu'il soit indexé par Google.
Google utilise des critères d'indexation mobile-first. Ainsi, même si vous avez soumis un sitemap à Google et que votre site contient du contenu de valeur, cela n'aura pas beaucoup d'importance si votre site n'est pas optimisé pour les utilisateurs mobiles.
Comment y remédier
La mise en œuvre d'un design réactif pour votre site web est l'un des meilleurs moyens de rendre votre site web adapté aux mobiles. Elle garantit que votre site s'affiche et fonctionne correctement pour les utilisateurs, quel que soit l'appareil qu'ils utilisent.
Si vous ne savez pas si votre site est adapté aux mobiles, utilisez le rapport Lighthouse de Google pour le savoir rapidement.
Parfois, c'est une image parasite ou un élément mal formaté sur votre page qui cause des problèmes pour les mobiles. Il est généralement facile de corriger ces problèmes pour que Google vous attribue la coche verte officielle "mobile-friendly" !
2. Votre contenu n'est pas conforme aux instructions de Google pour les webmasters.
Nous avons mentionné précédemment que Google souhaite fournir aux utilisateurs le meilleur contenu possible, ce qui implique de leur présenter un contenu de qualité, de grande valeur, qui respecte les directives pour les webmasters.
Si vous ne cochez pas les cases correspondant à tout ce que Google pense que votre contenu doit inclure ou si vos pages ne respectent pas les lignes directrices, elles ne seront pas indexées.
Comment y remédier
Vous pouvez consulter la liste complète des règles de Google pour les webmasters ici, mais voici un aperçu rapide de quelques éléments clés que votre contenu doit inclure :
- Mots et phrases clés pertinents sans bourrage de mots clés
- Liens vers votre page à partir d'une autre page trouvable sur votre site
- Écrire du contenu pour les gens et non pour les moteurs de recherche
- Suivez les meilleures pratiques de Google pour l'utilisation d'images, de vidéos et de données structurées dans votre contenu.
3. Vous n'avez pas de plan du site
Si vous n'avez pas de sitemap ou si vous ne l'avez pas soumis à Google, c'est probablement la principale raison pour laquelle votre site n'est pas indexé.
Un sitemap est une liste de toutes les pages de votre site. C'est l'un des meilleurs moyens pour Google de connaître le contenu de votre site.
Si vos pages ne sont pas indexées ou ne reçoivent pas de trafic et que vous n'avez pas soumis de sitemap à Google, ce dernier ne connaît pas votre site.
Comment y remédier
Créez un plan du site (sitemap) qui répertorie toutes les URL de votre site web et enregistrez-le dans un fichier. Accédez à Sitemaps dans Google Search Console, téléchargez votre sitemap et cliquez sur Envoyer.
"Créez un fichier sitemap XML pour que les moteurs de recherche découvrent les pages nouvelles et mises à jour de votre site, en répertoriant toutes les URL pertinentes ainsi que les dates de dernière modification de leur contenu principal."
Si vous mettez à jour l'une de vos pages, il est important de soumettre régulièrement votre sitemap à des fins d'exploration et d'indexation afin que Google dispose toujours d'une liste actualisée du contenu de votre site web.
4. Votre fichier robots.txt empêche les robots des moteurs de recherche d'explorer votre site.
Un fichier robots.txt permet de gérer le trafic des robots et d'éviter que votre site ne soit submergé de requêtes. Ce fichier peut vous aider à indiquer aux moteurs de recherche comment vous souhaitez qu'ils explorent votre site web.
Mais ils peuvent s'avérer délicats.
Si vous constatez que votre site n'est pas indexé, c'est peut-être parce que votre fichier robots.txt empêche les robots des moteurs de recherche d'explorer votre site web.
Comment y remédier
La meilleure façon de corriger et d'optimiser votre fichier robots.txt est de demander l'aide d'un expert en référence ment technique, car il s'agit d'un processus très complexe. Chez seo.com, nous proposons des services de référencement technique et nous avons des spécialistes du référencement technique prêts à vous aider à réparer votre fichier robots.txt et à s'assurer qu'il est optimisé pour l'indexation du site Web.
En savoir plus sur l'indexation des sites web sur SEO.com
Vous voulez plus de conseils et d'astuces en matière d'indexation de sites web et de référencement ? Consultez le contenu de notre blog pour obtenir d'autres guides et conseils pratiques provenant directement de nos experts en référencement !
Obtenons des résultats Ensemble 
Ensemble, obtenons des résultats
Écrivains
