На страницы пагинации с левыми параметрами я только сегодня сделала редирект 301.
А 404 стоял на материалы видимо давно уже наверное в самом движке и это наверное правильное поведения. И я даже не представляю, как от него избавиться (да и нужно ли?)
Мне тоже кажется, что запрет обходить эти адреса через robots.txt самый безопасный вариант. С помощью клода настроила nginx, вроде идет редирект с этих левых адресов на правильную страницу, но вдруг эти адреса не так уж и плохи.
Посмотрите, пожалуйста, увидела за предыдущие дни статистику обхода, статус был N / a (URL неизвестен роботу) стал 404 (Not Found)
/forum/topic16505.html&lr=54&search_source=yaru_desktop_common&search_domain=yaru
/community/66560&lr=213&search_source=dzen_touch_safe
/community/57470&lr=2&source=tabbar
/story/statusy&lr=2&utm_referrer=https%3A%2F%2Fwww.google.com%2F
Возможно, приходят из каких-то поисковиков или браузеров, только что с ними делать? Вроде страница была бы нормальная и может быть пользователь на ней что-то нужное нашел. Не теряется ли трафик? Что это вообще за адреса?
Обычный: 404 или 301.
Clean-ParamCanonical
Глянуть в логах, может ПС их и не посещает
Сейчас на canonical url стоит токен [current-page:url-with-query].
Если изменяю на просто [current-page:url]
canonical на всех страницах начинает вести только на первую страницу
/stihi?page=211 - каноникал - /stihi
Если оставляю токен [current-page:url-with-query] - в canonical появляются те же мусорные символы, что и в самом адресе.
Он у меня и на android не загрузился
у меня нет айфона - как можно проверить открываются ли мои сайты с устройств айфон?
есть какие то эмуляторы?
Та же проблема, по ip доступен, технический домен (заглушка) доступен. Один сайт периодически открывается, загружается. Как только зайдешь на остальные или поддомен первого - глохнет всё.
Через час может снова открываться.