Publier un plan de site et un robots.txt

Étapes

Environ une heure

Listez chaque page publique dans sitemap.xml, avec son adresse finale et la date où elle a vraiment changé.
Laissez de côté les pages qui redirigent, renvoient une erreur ou sont marquées noindex.
Ajoutez un robots.txt à la racine avec une ligne Sitemap donnant l’adresse complète. Ne bloquez pas une page qui compte sur noindex : les robots doivent pouvoir lire la balise.
Soumettez le plan de site une fois dans Google Search Console et une fois dans Bing Webmaster Tools.

Exemple

User-agent: *
Allow: /

Sitemap: https://example.com/sitemap.xml