robots.txt
Um arquivo de texto na raiz de um site que diz aos rastreadores (Googlebot, Bingbot) o que eles podem e não podem indexar.
Disallow: /admin/. Baseado na boa-fé: bots mal-intencionados o ignoram. Não é segurança, é etiqueta. Também não protege contra indexação: para isso, use a meta tag noindex.