Glossaire — seo-technique
Robots.txt
Un fichier à la racine d'un site qui indique aux robots des moteurs de recherche quelles sections ils peuvent explorer.
Le fichier robots.txt, placé à la racine d’un site (ex. ogcorp.agency/robots.txt), donne des instructions aux robots des moteurs de recherche sur les sections à explorer ou à éviter.
Une erreur classique et coûteuse : bloquer par erreur une section entière du site (souvent après une migration ou un passage en environnement de recyclage), rendant ces pages invisibles pour Google alors qu’elles restent accessibles aux visiteurs humains.
Termes liés