Un fichier robots.txt est un fichier texte placé à la racine d’un site Internet et qui est destiné aux robots des moteurs de recherche.Les robots parcours régulièrement les sites afin d’indexer leurs pages et de vérifier les mises à jour.
Un fichier robots.txt est un fichier texte placé à la racine d’un site Internet et qui est destiné aux robots des moteurs de recherche.Les robots parcours régulièrement les sites afin d’indexer leurs pages et de vérifier les mises à jour.