vosinformations.com

Déclarer son sitemap dans robots.txt

Sitemap dans robots.txt

lundi 24 septembre 2007

Paradoxal, car sitemap.xml reprend la cartographie complète de l’indexation voulue du site, tandis que robots.txt reprends la totalité des éléments dont le référencement n’est pas souhaité... L’eau et le feu.

Soumettre son sitemap directement à l’indexation des robots de moteur de recherche est possible depuis début 2007.

La syntaxe est la suivante :

Plan Sitemap : emplacement_Sitemap

ce qui donne :

http://www.monsite.fr/sitemap.xml

Sur ce site, c’est :

http://www.vosinformations.com/site...


Apparemment la déclaration de sitemap dans robots.txt est indépendante de la ligne user-agent et l’insertion n’est pas soumise à contrainte, sauf à respecter la syntaxe proposée et surtout que l’adresse soit valide.
Conseil est chaudement recommandé de tester son adresse sitemap avant soumission, un essai dans le navigateur prends un temps de copier-coller.

L’article concernant cette évolution dans la documentation du protocole sitemap.

P.-S.

L’adresse complète est mentionnée, contrairement aux fichiers robots où l’adresse est relative, à partir de la racine du site.

SPIP | | Plan du site | Suivre la vie du site RSS 2.0

Sauf mention contraire, le site est placé sous double licence Creative Commons BY-SA et GNU Free Documentation License.