
Touche la carte pour la faire tourner.
Rare
Fichier bloquant aux bots des pages web
1/1Un exemplaire au monde.
Le protocole d’exclusion des robots, souvent nommé robots.txt, est une ressource de format texte qui peut être placée à la racine d’un site web, et qui contient une liste des ressources du site qui sont censées ou non être indexées par les robots d’indexation des moteurs de recherche. Par convention, les robots consultent le fichier texte nommé robots.txt avant d’indexer un site Web.
Illustration
Texte
Résumé et adapté de l’article « Protocole d'exclusion des robots », Wikipédia en français. Licence CC BY-SA 4.0.
Aura : statistiques de consultation de l’API Wikimedia.