предотвращение индексирования при помощи заголовка HTTP X-Robots-tag
Эффект тот же самый, как и при использовании мета-тега noindex, но этот приём особенно полезен для нетекстового содержимого, когда нет возможности разместить мета-тег в исходном коде. Ниже приведён пример применения тега X-Robots-tag в заголовке HTTP-ответа, позволяющего запретить индексацию страницы.
HTTP/1.1 200 OK
Date: Tue, 25 May 2010 21:42:43 GMT
(…)
X-Robots-Tag: noindex
(…)Дополнительные сведения об использовании тега X-Robots-tag можно найти на сайте code.google.com (на английском).
у яндекса запрета на индексацию хттп-заголовками нету.
а что – как раз избранная неиндексация картинок и тп., документов doc