Aller au contenu
Floskool

Chapitre 3 · La technique, expliquée simplement

sitemap.xml, robots.txt et Google Search Console

Leçon gratuite 8 minGroupe Claude Code & IA

Suis cette formation dans ton espace : ta progression est gardée, et la communauté répond à tes questions.

Suivre gratuitement

Pourquoi c'est important

Karim, notre plombier de Rennes, vient d'ajouter une page « Remplacement de chauffe-eau ». Comment Google sait-il qu'elle existe ? Il finira peut-être par la trouver en suivant les liens. Mais tu peux l'aider, et surtout vérifier ce que Google voit de ton site.

Trois outils pour ça, tous gratuits :

  • sitemap.xml : un fichier qui liste toutes les pages publiques de ton site. Il aide Google à les découvrir.
  • robots.txt : un petit fichier à la racine du site (le dossier principal) qui indique aux robots d'exploration ce qu'ils peuvent visiter et où trouver le sitemap.
  • Google Search Console : l'outil gratuit de Google pour les propriétaires de sites. Tu y vois les recherches qui t'amènent des visiteurs, les pages que Google a ajoutées à son index (sa grande bibliothèque de pages) et les problèmes éventuels.

À quoi ressemblent ces fichiers

Un sitemap simple :

<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
  <url>
    <loc>https://[ton-domaine.fr]/</loc>
    <lastmod>[AAAA-MM-JJ]</lastmod>
  </url>
  <url>
    <loc>https://[ton-domaine.fr]/services.html</loc>
    <lastmod>[AAAA-MM-JJ]</lastmod>
  </url>
</urlset>

loc est l'adresse complète de la page, lastmod la date de sa dernière modification.

Un robots.txt simple qui autorise tout et indique le sitemap :

User-agent: *
Allow: /

Sitemap: https://[ton-domaine.fr]/sitemap.xml

Attention : robots.txt n'est pas un moyen de cacher une page de Google. Google le précise dans sa documentation. Pour qu'une page n'apparaisse pas dans les résultats, il existe d'autres méthodes (comme la balise noindex) ; demande à Claude Code de t'expliquer si tu en as besoin.

Le pas à pas

  1. Fais créer ou mettre à jour les deux fichiers par Claude Code, avec un commit avant et après.
  2. Mets ton site en ligne (c'est toi qui le fais, ou ton hébergeur).
  3. Ouvre Google Search Console (search.google.com/search-console) et ajoute ton site.
  4. Prouve que le site t'appartient : Google propose plusieurs méthodes, par exemple un enregistrement DNS (un réglage chez la société qui gère ton nom de domaine) ou un fichier à déposer sur ton site. Suis celle que Google t'indique.
  5. Envoie l'adresse de ton sitemap dans la rubrique dédiée aux sitemaps.
  6. Reviens une fois par mois : regarde les recherches qui t'amènent des visiteurs et les problèmes signalés.

Quand tu modifies une page importante, l'outil d'inspection d'URL de Search Console te montre comment Google voit cette page.

Contexte : site en ligne sur https://[ton-domaine.fr].
Objectif : aider Google à découvrir toutes mes pages publiques.
Contraintes :
- sitemap.xml à la racine avec toutes les pages publiques (pas les brouillons, pas les pages de remerciement après formulaire), adresses complètes en https, date de dernière modification ;
- robots.txt qui autorise l'exploration et indique l'adresse du sitemap ;
- commit avant et après ; ne mets rien en ligne sans mon accord.
Format attendu : les deux fichiers, puis les étapes simples pour ajouter mon site dans Google Search Console et y envoyer le sitemap. Si tu n'es pas sûr d'un intitulé exact dans l'interface de Google, dis-le et renvoie-moi à l'aide officielle de Search Console.

Et une fois par mois, pour lire tes résultats :

Contexte : voici un export ou une capture des requêtes et des pages de Search Console : [fichier ou image].
Objectif : comprendre ce qui m'amène des visiteurs et ce qui peut progresser.
Contraintes : n'interprète que les données fournies ; aucune promesse de classement.
Format attendu : 3 constats, 3 pages à améliorer (avec la requête associée) et une action concrète par page.

Les erreurs à éviter

  • Un robots.txt qui bloque tout (Disallow: /), parfois laissé par erreur après la construction du site. Vérifie le tien.
  • Un sitemap avec des adresses en http alors que ton site est en https, ou avec des pages qui n'existent plus.
  • Oublier de mettre à jour le sitemap quand tu ajoutes une page.
  • S'affoler au premier message d'erreur dans Search Console. Certains messages sont normaux. Copie-le, demande une explication simple à Claude Code, puis décide.
  • Attendre un effet immédiat. Google explore les sites à son rythme.

À toi de jouer

  1. Tape l'adresse de ton site suivie de /robots.txt dans ton navigateur (exemple : ton-domaine.fr/robots.txt). Note ce que tu vois, ou si la page n'existe pas.
  2. Fais pareil avec /sitemap.xml.
  3. Lance le premier prompt de cette leçon, mets en ligne, puis ajoute ton site dans Google Search Console et envoie ton sitemap.