Что делать со страницами, которых нет и никогда не было?

463

Владимир-C

21 декабря 2018, 15:29

493

Среди указанных в вебмастере замечаний Яндекса есть две группы, относящиеся к несуществующим страницам, которых на сайте никогда и не было.

Вероятно, на каких-то сторонних сайтах проставлена битая ссылка, по которой и пришел робот. И я вижу такие замечания:

16.12.2018 при обращении к странице робот получил HTTP-код 404. Проверьте ответ сервера. Если проблема актуальна, обратитесь к администратору своего сайта или сервера. Если страница уже доступна, отправьте её на переобход.

Так получается, когда адрес несуществующей страницы имеет на конце слеш (например, https://сайт/www.novex.ru/)

В других случаях он пишет:

Страница перенаправляет робота на https://сайт/www.novex.ru/. Проверьте индексирование цели редиректа.

Тут перенаправление идет с https://сайт/www.novex.ru на https://сайт/www.novex.ru/. В этом случае скрипт сайта дописывает закрывающий слеш (так он устроен).

Но ни со слешем, ни без него страниц с таким адресом никогда не было и нет.

Таких замечаний относительно много и я в раздумье: либо не обращать на это внимания, либо набраться терпения и адрес каждой несуществующий и несуществовавшей страницы отправить в вебмастере на удаление.

Как лучше сделать?

427

samimages

21 декабря 2018, 17:26

#1

Владимир-C:
Как лучше сделать?

Сделать лучше. Как? Ну возьмите для начала правило: все адреса которых нет даже гипотетически должны отдавать 404 ответ.

1

Опыт как иммунитет — приобретается в муках! Аудит семантики от 15К [долго] - ЛС

ВC

463

Владимир-C

21 декабря 2018, 18:04

#2

samimages:
все адреса которых нет даже гипотетически должны отдавать 404 ответ.

Это все есть, сделано в самой CMS непосредственно при создании сайта. Я и в теме написал: "при обращении к странице робот получил HTTP-код 404".

M

235

miketomlin

21 декабря 2018, 20:29

#3

Со слэшами сами виноваты. Нужно было сразу делать автокорректировку адресов редиректом. По прочим битым смотрите статистику. Если есть смысл, можно «родить» несуществующую ранее страницу или повесить на адрес редирект, иначе забить/«отправить в вебмастере на удаление».

---------- Добавлено 22.12.2018 в 00:31 ----------

И что за странный пример адреса вы запостили? Это чтобы советчикам было труднее вам помочь?

---------- Добавлено 22.12.2018 в 00:33 ----------

Т.е. нафига надо было пихать нечто, похожее на имя хоста, в путь?

2

Домены и скрипт для коротких ссылок: https://u75.ru/domains-for-shortcuts

Как скормить гуглу 410 Теряет слэш при редиректе Ответ сервера для PHP

VK приобрела 70% в структуре компании-разработчика red_mad_robot

Что делать, если ваша email-рассылка попала в спам