Спасибо, а с пагинацией не подскажите как быть?
http://joxi.ru/1A5oLl9CnzLz9m
А пути решения есть какие-нибудь? Связываться с владельцами сайта!?
я знаю где ссылка размещена. Вопрос в другом, все страницы одинаковые, но разные URL и их количество увеличивается на 4 каждый месяц. Ощущение, что CMS донора генерит дубли неким образом.
У вас order и sort не закрыты, синтаксис неверный.
Disallow: *order*
Этого должно хватить.
https://webmaster.yandex.ru/tools/robotstxt/
Проверяйте.
Спасибо, а с пагинацией не подскажите как быть?
http://joxi.ru/1A5oLl9CnzLz9m
А пути решения есть какие-нибудь? Связываться с владельцами сайта!?
я знаю где ссылка размещена. Вопрос в другом, все страницы одинаковые, но разные URL и их количество увеличивается на 4 каждый месяц. Ощущение, что CMS донора генерит дубли неким образом.