Google напомнил вебмастерам, что с 1 сентября прекратит поддержку директивы noindex в robots.txt. Сообщение об этом поисковик отправлял еще в июле через уведомления в Search Console.
Просто напоминаем, что скоро 1 сентября 2019 года. Директива noindex в robots.txt больше не будет поддерживаться. Используйте другие опции, упомянутые в нашем блоге.
В частности, в качестве замены noindex в robots.txt Google посоветовал использовать noindex в метатегах robots, 404 и 410 коды, защиту паролем, инструмент удаления URL в Search Consol, disalow в robots.txt.
Источник: Twitter