Articles pratiques
Articles pratiques
Le premier article de cette rubrique explique comment vérifier un site avant sa mise en ligne pour que les moteurs de recherche puissent le trouver et l’indexer. Résultat attendu : les pages s’affichent sans erreur, robots.txt ne bloque rien d’inutile, les pages publiques ne portent plus de consignes de non-indexation héritées des tests, le sitemap est prêt, les pages importantes sont reliées par des liens et la propriété du site est validée dans les outils pour webmasters. Les exemples de l’article sont fictifs et servent uniquement d’illustration.
Une vérification avant lancement ne fera pas apparaître votre site dans les résultats comme par magie. Elle supprime simplement les obstacles que vous avez vous-même placés.
Avant de commencer
- L’adresse du site telle qu’elle sera utilisée après la mise en ligne
- Un accès aux fichiers du site ou au panneau d’administration pour modifier robots.txt et le sitemap
- La liste des pages les plus importantes : accueil, rubriques, contact
- Des comptes Google et Yandex pour configurer les outils pour webmasters
Vérifiez que les pages s’affichent
Parcourez les pages principales comme un visiteur ordinaire, sans vous connecter. Elles doivent s’afficher sans erreur serveur, et les adresses inexistantes doivent indiquer clairement que la page n’existe pas, au lieu d’afficher une page vide de remplacement.
Exemple fictif : pour toute adresse mal saisie, le site affiche la page d’accueil. Pour un moteur de recherche, cela ressemble à une multitude de pages identiques.
Vérifiez le fichier robots.txt
Le fichier robots.txt se trouve à la racine du site et indique aux robots les sections qu’ils n’ont pas besoin d’explorer. Le protocole est apparu en 1994 et a été normalisé en 2022 sous le nom de RFC 9309. Assurez-vous que le fichier ne bloque pas tout le site, et rappelez-vous qu’il contrôle l’exploration sans garantir que la page restera hors de l’index.
Exemple fictif : la version de test du site était entièrement bloquée à l’exploration, et le blocage a été oublié lors de la migration. Les moteurs ne voient que l’interdiction elle-même.
Supprimez les consignes de non-indexation de test
Outre robots.txt, une consigne de non-indexation peut figurer dans le code de certaines pages ou dans les réglages du CMS. Vérifiez qu’aucune page publique n’en contient, et que les pages techniques en ont une là où c’est réellement nécessaire.
Exemple fictif : dans les réglages du CMS, la case « Demander aux moteurs de recherche de ne pas indexer ce site » est restée cochée depuis la phase de développement.
Préparez le sitemap
Un sitemap au format du protocole Sitemaps (sitemaps.org) est la liste des adresses que vous souhaitez présenter aux moteurs de recherche. Le protocole existe depuis 2006 et est pris en charge par les principaux moteurs. N’y incluez que des pages publiques qui doivent apparaître dans les résultats.
Exemple fictif : les adresses du panier et de l’espace client se sont retrouvées dans le sitemap. Mieux vaut les retirer : elles n’ont pas leur place dans les résultats.
Reliez les pages par des liens
Les moteurs découvrent les pages principalement grâce aux liens. Chaque page importante doit être accessible depuis le menu, les rubriques ou d’autres contenus du site, et pas uniquement via le moteur de recherche interne ou un formulaire.
Exemple fictif : les articles ne sont accessibles que par la recherche interne. Le robot n’a aucun lien à suivre, et une partie des contenus passe inaperçue.
Rédigez des titres de page explicites
Chaque page doit avoir son propre titre et une courte description qui reflètent son contenu. Des titres identiques sur des dizaines de pages empêchent les visiteurs comme les moteurs de comprendre ce qui les distingue.
Exemple fictif : toutes les fiches produits ont pour titre « Boutique en ligne ». Dans les résultats de recherche, impossible de les différencier.
Qualifiez les liens payants et ceux des utilisateurs
Si votre site contient de la publicité avec des liens, ajoutez à ces liens l’attribut rel="sponsored" ou rel="nofollow" : les règles des moteurs l’exigent. Les liens dans les commentaires et les forums peuvent recevoir rel="ugc". L’achat et la vente de liens destinés à manipuler le classement sont interdits par ces règles.
Exemple fictif : une bannière partenaire renvoie vers le site d’un annonceur. Le lien qu’elle contient est qualifié en sponsored.
Configurez les outils pour webmasters
Validez la propriété du site dans Google Search Console (appelé Google Webmaster Tools jusqu’en 2015) et dans Yandex Webmaster, puis soumettez le sitemap. Ces outils affichent les données des moteurs eux-mêmes : quelles pages ils connaissent et quelles erreurs surviennent lors de l’exploration.
Exemple fictif : une fois configuré, l’outil signale qu’une partie des pages est inaccessible au robot. C’est le signe qu’il faut revenir aux étapes 1 à 3.
Erreurs fréquentes
- Laisser un blocage d’exploration ou d’indexation hérité de la version de test
- Croire que robots.txt retire de façon fiable une page des résultats
- Ajouter au sitemap des adresses techniques ou inexistantes
- Rendre des pages importantes accessibles uniquement via un formulaire ou la recherche interne
- Donner le même titre à toutes les pages
- Acheter des liens ou participer à des systèmes de liens pour gagner des positions
Alternatives
- Si vous n’avez pas accès aux fichiers du site, demandez au développeur ou à l’hébergeur de vérifier robots.txt et le sitemap à l’aide de cette liste.
- Si votre site est créé avec un constructeur de sites, cherchez dans son aide les rubriques consacrées aux réglages pour les moteurs de recherche : beaucoup de fonctions s’activent d’une simple case à cocher.
- Si vous n’êtes pas prêt à configurer les outils pour webmasters, vérifiez au moins que le site apparaît quand on recherche son nom exact, en gardant à l’esprit qu’il ne s’agit que d’un contrôle sommaire.
Liste de contrôle
- Les pages principales s’affichent sans connexion et sans erreur
- Les adresses inexistantes ne sont pas remplacées par la page d’accueil
- robots.txt ne bloque pas l’ensemble du site
- Les pages publiques ne portent pas de consignes de non-indexation de test
- Le sitemap est prêt et ne contient que des pages publiques
- Les pages importantes sont accessibles par des liens
- Les liens payants sont qualifiés en sponsored ou nofollow
- La propriété du site est validée dans Search Console et Yandex Webmaster
Catalogue des publications pour les lecteurs francophones
Cette rubrique accueillera des articles écrits spécialement pour les lecteurs de France et des autres pays francophones. Ils tiennent compte des moteurs de recherche et des outils qu’utilisent réellement les propriétaires de sites francophones, et ne sont pas des traductions des contenus des autres versions linguistiques du site.
Pour l’instant, le catalogue ne contient qu’un article : celui présenté ci-dessus. Les prochains contenus apparaîtront dans cette liste.
Sujets prévus par la rédaction
- Lire les rapports de Google Search Console : par où commencer quand on débute
- Page sortie de l’index : les causes possibles, vérifiées étape par étape
- Bing Webmaster Tools : à quoi sert-il pour un site en français
- Changer de nom de domaine : redirections, robots.txt et sitemap à vérifier
Règles éditoriales
- Les articles de ce catalogue sont rédigés séparément pour chaque version linguistique et ne sont pas des traductions.
- Certains articles renvoient vers des sites tiers, y compris des services de jeux vidéo ; nous ne contrôlons ni leur contenu, ni leurs prix, ni leurs conditions.
- Nous ne publions ni notes invérifiables de sites ou de services, ni promesses de positionnement, ni avis.
Rubriques associées
- Questions-réponses
Réponses courtes sur le PageRank, l’indexation, les liens et les métriques de sites.
- Glossaire
Glossaire : recherche et indexation, liens, métriques.
- Parcours de lecture
Parcours de lecture : premier site, histoire des métriques de recherche, liens sans spam.
Sources
- Google Search Central — documentation et règles relatives au spam
- Yandex — Aide pour les webmasters (Yandex Help for webmasters)
- RFC 9309 (Robots Exclusion Protocol)
- sitemaps.org
Informations à jour à la date de rédaction. La documentation des moteurs de recherche, leurs règles et leurs outils pour webmasters évoluent : vérifiez toujours les données à jour dans les sources officielles.