📖 Глоссарий

Директива Disallow

Также: Disallow

Коротко

Правило в robots.txt, которое запрещает поисковому роботу обходить указанные страницы или разделы.

Disallow запрещает обход, но не гарантирует, что страница исчезнет из поиска: адрес может остаться в индексе по внешним ссылкам. Чтобы убрать страницу из выдачи, нужен метатег noindex.