На этом тему, думаю, можно закрыть.
Во время всей этой возни выяснилось два интересных момента:
1) проблема, мною описанная, относится не к теме дублирования контента, а к теме - клоакинг. Бот из техподдержки яндекса однозначно написал в последнем сообщении "если содержание страницы меняется в зависимости от способа перехода на сайт" - то это однозначно клоакинг. Клоакинг - похуже будет чем дублирование, категорично нужно избавляться от таких выкрутасов на всяких этих ваших скриптах Next, React и тп.
2) На данный момент практически невозможно достучаться до живого оператора из техподдержки яндекса - как я не изгалялся, что не писал за два часа переписки - так и не получилось. Результат предсказуем - бот из чата яндекса в первый день прямым текстом разрешил мне использовать клоакинг, пока я не начал цитировать ему выдержки из "Безопасность сайта и нарушения" Яндекса
Во всех страницах подкатегорий выставляете каноникал урл на главную категорию.
Это будет единственным правильным решением данной проблемы.
Да твою жеж м.....!!!!!!!!!!!!!!!!!!!!!!!!!!
Сегодня оно уже дало заднюю и извиняется!!! см. скрин.
Если уже техподдержке яндекса нельзя верить, то кому ж тогда верить!!! Одни роботы вокруг
Да, я так и делал, писал долго и нудно. Но односложные механические ответы настораживают.
Еще настораживает то, что, как выяснилось, клоакинг сейчас разрешен, если верить "человеку" из поддержки яндекса.
Та проблема что в этом треде описана - это есть по сути КЛОАКИНГ (под одним и тем же урл - боту поисковому отдавать один контент, а пользователю в браузере под тем же урл - отдавать другой контент). Так вот, "человек" из поддержки яндекса пишет что так можно делать, "если это не вводит в заблуждение пользователей".
Поздравляю всё seo-сообщество !!! Клоакинг официально разрешен яндексом !!!
в том то и дело, что если поисковый бот зайдет по внешней ссылке на страницу https://starvell.com/youtube/services/likes - он "увидит" уникальный контент принадлежащий этой же странице. Если же бот будет ходить по внутренним ссылкам, он сперва зайдет на главную страницу категории https://starvell.com/youtube/services, затем перейдет с нее на внутреннюю страницу категории https://starvell.com/youtube/services/likes (на неё в этом случае подтянется контент со страницы https://starvell.com/youtube/services), то есть, в таком случае страница https://starvell.com/youtube/services/likes будет дублем страницы https://starvell.com/youtube/services
Так вопрос, бот ходит по внутренним ссылкам сайта, написанного на скрипте ? Если не ходит - то и проблемы нет никакой. Хотя тогда другой вопрос возникает - а как поисковик находит новые страницы на "скриптовом" сайте, если не ходит по внутренним ссылкам.
Ещё как вариант можно бахнуть canonical на главную страницу каждого раздела + выводить ссылки на эти мусорные страницы через JS, чтобы боты меньше их кушали.
Считаю то что и не убавляет.
