robots.txt
Un fichier texte à la racine d'un site qui indique aux robots d'exploration (Googlebot, Bingbot) ce qu'ils peuvent ou non indexer.
Disallow: /admin/. Il repose sur la bonne foi — les robots malveillants l'ignorent. Ce n'est pas de la sécurité, seulement de la politesse. Ce n'est pas non plus une protection contre l'indexation : pour cela, on utilise la balise meta noindex.