ROBOTS.TXT: поиск по тегам

Делать это стоит в том случае, если они не ранжируются по интересующим вас запросам

Такой способ приведет к потере ценности от ссылок

Владельцы сайтов интернет-магазинов регулярно сталкиваются с тем, что при индексации страницы пагинации воспринимаются поисковыми системами как дубли. Чтобы избежать этого, программисты и SEO-специалисты должны внимательно следить за настройками страниц — причем не только в файле robots.txt, но и в программном коде. 

Поисковые роботы Яндекса перестали учитывать пустую директиву Allow как запрещающий сигнал