Что сделано? Что не сделано? На сколько упал траф?
Это единственный верный ответ из всей ветки.---------- Добавлено 26.02.2020 в 10:16 ----------
Пагинация !=дубль
А есть в сети услуги, типа "подключу Дзен"? Тупо потестить траф.
Офигеть! САПА в 2020 году - офигеть в квадрате.
Пробейте по куску текста, дублю сразу же будет видно.
Закиньте страничку на переиндексацию и последите что будет.---------- Добавлено 25.02.2020 в 14:46 ----------
Вполне возможно.
Или в самом поисковике.
Заглянул в лог сервера и посмотрел куда ходит гугл бот. Оказывается он лазит по страницам, которые давным давно удалены (в кеше поисковика уже новые версии), и идёт глубже. Т.е. сканит скрипты библиотек и файлов js страниц которых уже нет (ни страниц, ни скриптов).
Или вот ещё забавно. Гугл консоль указала открыть страницы для индексации и поставить на них тег ноуфолоу. Сделал как просит. В итоге, запрещённые страницы всё равно регулярно обходятся, и даже чаще чем те, на которые есть ссылка с морды.
Т.е. на "мусорные" страницы тратит краулерный бюджет (хотя я ему прямо сказал этого не делать), а на нормальные страницы сайта забивает.
Для чего гугл так себя ведёт?
Недавно стали прилетать ошибки "страница запрещена в robots.txt", а на самом деле всё ок (как показала проверка самого же гугла).
Просто гуглу на поиск уже всё равно.
Есть мысли откуда гугл их цепляет?
Проверьте эту страницу на наличие сохранённой копии. Там всё в порядке?