robots.txt
Текстовый файл в корне сайта, который сообщает поисковым роботам (Googlebot, Bingbot), что можно индексировать, а что нет.
Disallow: /admin/. Работает на честном слове: вредоносные боты его игнорируют. Это не защита, а этикет. И не защита от индексации — для этого есть метатег noindex.