Безопасно размещаем отзывы и Работаем с репутацией!
X-Robots-Tag
Также: заголовок X-Robots-Tag
Коротко
HTTP-заголовок сервера с теми же инструкциями для поисковиков, что и метатег robots: noindex, nofollow, nosnippet.
X-Robots-Tag нужен для файлов, в которые нельзя вставить метатег: PDF, изображения, документы. Например, им закрывают от поиска старые прайсы и внутренние документы.