Fichiers Sitemap.xml et Robots.txt
Certains fichiers seront également créés pour permettre de donner des indications aux moteurs de recherche et ainsi optimiser l’indexation des différentes pages du site. C’est notamment le cas du fichier “robots.txt” créé pour commander les robots des moteurs lorsqu’ils explorent votre site, le but étant de leur préciser le contenu qu’ils peuvent ou non indexer.
Le fichier Sitemap quant à lui sera créé pour faciliter le travail des moteurs en listant les différentes pages contenues dans le site et en donnant des informations supplémentaires sur chacune d’entre-elles. Ce fichier répond à un protocole commun adopté par l’ensemble des moteurs importants et arrive en complément de l’exploration “classique” effectuée par les différents robots.
|