Un Robots.txt, est un fichier texte placé à la racine d'un site web qui permet de donner des instructions aux robots d'indexation des moteurs de recherche afin de leur indiquer les pages qui ne peuvent être indexées. On l’utilise aussi pour le référencement naturel.
Pour ajouter un sitemap, rendez-vous sur la Barre de gestion verticale situé en bas à gauche dans l'éditeur, cliquez sur l’onglet « Paramètres ».
En suite dans la section « Référencement » sur la barre de menu situé à gauche. Soumettre un fichier Robots.txt automatique est coché par défaut.
Note :
La modification du contenu du fichier Robots.txt peut nuire au référencement de votre site. Nous recommandons donc seulement aux webmestres expérimentés de modifier le contenu du robots.txt.