noindex через meta robots: когда закрывать страницу от индекса
Разница между noindex и Disallow, комбинация с canonical и типичные ошибки на staging.
Директива `noindex` в meta robots или HTTP-заголовке X-Robots-Tag просит не индексировать страницу; robots.txt Disallow не гарантирует удаление из индекса, если URL уже известен.
Страницы с noindex не должны попадать в sitemap как «важные» — это противоречие сигналов.
- Block search indexing with noindex — Google Search Central — Способы noindex и ограничения.
- Robots meta tag — Google Search Central — Все директивы meta robots.
Staging
На превью-доменах ставьте noindex + базовую auth; не полагайтесь только на robots.txt.
После переноса на prod снимайте noindex и проверяйте URL Inspection в Search Console.