Утверждения, основания и ограничения из реальных источников
noindex сообщает поддерживающему его поисковому роботу, что страницу не следует индексировать. Для Google правило передают в метатеге robots или HTTP-заголовке. Размещать noindex в robots.txt нельзя. Нужно также обеспечить роботу возможность получить страницу и прочитать правило; иначе ожидаемое исключение из поиска может не произойти.
Статус: active · Версия 1
Google не поддерживает указание правила noindex в файле robots.txt.
Ограничение: Управление индексированием не заменяет защиту приватной информации.
Ограничение: Изменение в поиске не обязано происходить мгновенно.
Основание: источник
Google не поддерживает указание правила noindex в файле robots.txt.
Эффект для конкретного сайта не измерялся