Несуществующие ссылки с сайта в яндекс поиске

K9
На сайте с 13.03.2015
Offline
27
744

Доброго времени суток!

Уже более года Яндекс массового добавляет в поиск несуществующие ссылки с моего сайта.

Линки на моем сайте выглядят следующим образом, (пример рабочей и "правильной" ссылки):

http://example.com/article/118737/call-of-duty-3

т.е

http://example.com / article / {ID_материла} / {ЧПУ}

{ID_материла} = уникальный номер опубликованной статьи.

{ЧПУ} = при публикации имя материала из такого состояния "Call of Duty 3" превращается в такое "call-of-duty-3".

Проблема в том, что робот постоянно заменяет ЧПУ на какие-то странные цифры, и в измененном виде добавляет их в поиск.

Пример:

http://example.com/article/118737/987190

На моем сайте нет и не было таких ссылок, более чем такой ЧПУ невозможен, он не имеет смысла.

На всех страницах и давно уже стоит правильный и полный rel="canonical", более чем я поступил по другому и решил на стороне сервера проверять правильный ли ЧПУ пришел от пользователя или нет, в случае если ЧПУ отличается от того, что в базе данных, происходит 301-ый редирект на правильный адрес.

Писал Платону. Тот говорит, что:

При первом обращении страницы отдают нулевой код ответа, но из-за наличия заголовка с редиректом продолжают участвовать в поиске. При повторном обращении отдаётся уже корректный 301 код ответа.

Тут мне не понятно два аспекта. Как сайт может отдавать нулевой код ответа? У меня он отдает либо 200 либо 404. При неработоспособности какой-то из части сайта отдается код 503. Если какие-то страницы недоступны для робота, почему мне не приходит уведомление от Метрики как это происходит обычно?

Второй аспект, что значит "при повторном обращении"? Т.е где-то на моем сайте стоит проверка первый ли раз клиент посещает эту страницу или нет? Или повторное обращение это уже робот сам для себя решает? Все-таки второе...

Больше всего мне непонятно одно. Если страницы отвечают якобы нулевым кодом, зачем их добавлять в большой поиск? Их не две, не три, их десятки тысяч. Разве в поиск не попадают ссылки только с положительным кодом? Самая большая ирония это когда при очередной выдаче робот жалуется на то, что вот такая правильная ссылка:

http://example.com/article/118737/call-of-duty-3

является дублем вот такой неправильной ссылки

http://example.com/article/118737/987190

И в то же время рекомендует указать роботу предпочтительный адрес с помощью 301 редиректа или атрибута rel="canonical" не смотря на то, что все это уже есть и уже не первый год.

Помогите разобраться, тяжелый случай...

SeVlad
На сайте с 03.11.2008
Offline
1609
#1
kingkobra97:
Помогите разобраться, тяжелый случай...

Без адреса сайта и др технических подробностей - к гадалкам.

ЗЫ. В личку писать ничего не нужно.

Делаю хорошие сайты хорошим людям. Предпочтение коммерческим направлениям. Связь со мной через http://wp.me/P3YHjQ-3.
Lazy Badger
На сайте с 14.06.2017
Offline
228
#2
SeVlad:
Без адреса сайта и др технических подробностей - к гадалкам

Только один раз и исключительно по вашей просьбе

kingkobra97, SeVlad совершенно прав. А я добавлю - "какой ты нахрен вебмастер, если даже вопрос задать не умеешь нормально?" и отвечу "Такой же, как95% здешнего контингента". Учись, дюдя, а то так Митрофанушкой и проживешь всю жизнь

Ответ на вопрос

Чувачок, если у тебя WP и ты по какой-то причине имеешь в шаблоне постов

<link href="...." rel="shortlink">
и не имеешь
<link href="...." rel="canonical">
, то где-то так оно и будет без ЧПУ на категории

Как решать

Идти в админку и проверять-править

PS: Какой вопрос, такой и ответ.

Производство жести методом непрерывного отжига
K9
На сайте с 13.03.2015
Offline
27
#3

Господи, какие все агрессивные на этом форуме...

В общем с проблемой разобрался сам. Чувствую, что объяснять решение "гуру" у которых потолок это wordpress, не стоит.

S
На сайте с 30.09.2016
Offline
469
#4
kingkobra97:
В общем с проблемой разобрался сам.

Ну да. Есть такой тип людей, у которых существует потребность поплакаться в жилетку. Типо понаписал чего-нибудь абстрактного на страницу, излил душу - а там, глядишь, полегчало, - и решение нашлось. Значит, форум помог-таки. ;)

Отпилю лишнее, прикручу нужное, выправлю кривое. Вытравлю вредителей.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий