Начните с того, какой бот учитывает ноуиндекс.
Так что, в основном для ремиссии паранои... (беспроблемной индексации молодого домена) что-то типа www.unmedia.ru/js-seo.html рисования JS, закрытым в роботсе. Или как-то иначе.
Нет.
Но ранжирующие системы — поиск слов.
Если среди повторяющегося на разных страницах контента (хоть в навигации... частичные дубли типа) есть слова, присутствующие в запросах...
Просто частичное дублирование не является единственным признаком для зафильтровывания документа. Ну вот наставят с форумов ссылок на кривой дубль... что будет в индексе...
И кросовки / вино «Димон». Рекламировали громче.
Как раз суть и меняет.
Вы говорите о частично дублирующемся контенте на сайте.
А индексатору приходится принимать решение о документах при включнении / не включении в индекс (вот критерии этого алго интересны, и не только вам).
Скрыть от бота дублирущийся контент — не проблема... но может быть этого и не всегда нужно делать.
Дайте лучше определение дубля с т.з. олгоритма их отсева (в целях экономии бабала на бренное железо).
// по версии ГРУ, интересующейся местом работы мэта катса, дублем может быть документ (с неким урлом)
Всё это ваше SEO давно скатилось глубже маразма.
Идеи надо проверять (см. язык запросов), а то писатели ботов вам верующим ничего не обязаны, да и поумирали/поувольнялись / ушли в министерство нападения давно, оставив кривые/безидейные олгоритмы (т.е. в какой последовательности что-то в разметке учитывается... и сколько там костылей).
А как вы проверите: исключило из индекса блок кода или куски текста?
<p> Типа начало текста, <!--noindex--> <div style="display:inline">продолжение видимого ползателю,</div> <!--/noindex--> окончание. </p>
www.google.ru/search?q=%22%D0%BA%D0%BE%D0%BB%D0%B8%D1%87%D0%B5%D1%81%D1%82%D0%B2%D0%BE+%D0%BF%D1%80%D0%BE%D1%81%D0%BC%D0%BE%D1%82%D1%80%D0%BE%D0%B2+%D0%98%D1%81%D0%BA%D0%BB%D1%8E%D1%87%D0%B8%D0%BB+%D1%84%D1%83%D1%82%D0%B5%D1%80%22 Нет результатов для "...
Автоматом доры генерят.
А тут всё продаётся исключительно вручную.
См несколько постов после /ru/forum/190119
Не сделаете. «Не сейчас» будет вечно пока не сменятся мотивы админа.
Траф у музеев/кладбищ / культуры / учебников истории... во времена разложения традиций в мире животных... не бывает больше их остаточной значимости. Даже не смотрел. В конце концов — нет трафа там — есть траф здесь.
ps А какие отмазки вы будете клеить вместо похорон лозунга «Самая крупная поисковая система Рунета»?
Просто они этот копипаст умеют готовить не считают единственным обстоятельством.
Ну вот уволившийся вещал в 2011г:
Но robots.txt у вас тоже есть.
Нужно ещё процитировать тут как на некоторых сцайтах траф увеличивался после закрывания всего левого?