Индексируются несуществующие страницы.

12
RT
На сайте с 02.10.2016
Offline
4
2239

Добрый день форучане,

Сбился с ног, не знаю даже куда обратиться за советом. Помогите если сможете.

С недавних пор поисковик начал индексировать не существующие страницы.

Скажем есть ссылка, рабочая, посиковик ее проиндексировал, но почему то индексирует еще одну страницу добавляя в конце слешmorfius542.

Откуда она берет эту страницу я совсем не пойму.

Такое ощущение, что ссылка находится где-то в сети, внутри все перелопатил такого нет. Можно ли как то узнать откуда идет запрос...

Уведомления следующего характера :

404 Report - a file not found error was registered on your site.

404 URL: непонятная ссылка

Referred by:

User Agent: Mozilla/5.0 (compatible; AhrefsBot/5.1; +http://ahrefs.com/robot/)

M
На сайте с 04.12.2013
Offline
223
#1

404-ые по определению не индексируются. Если хотите узнать источник, можете к примеру писать лог в обработчике 404-ой.

---------- Добавлено 03.10.2016 в 03:09 ----------

Как я понимаю, это бот. Можете забить. Нек. боты чекают оч. древние ссылки.

Домены и скрипт для коротких ссылок: https://u75.ru/domains-for-shortcuts
Doma-in
На сайте с 19.04.2010
Offline
393
#2

RtsTravel, ваш сайт случаем не на вордпресс?

M
На сайте с 04.12.2013
Offline
223
#3

Да, на WP.

Doma-in
На сайте с 19.04.2010
Offline
393
#4
miketomlin:
Да, на WP.

Во-первых: если вы движок либо дизайн скачали не на оф.сайте, то могут быть вкрапления, см.п2

Во-вторых: нашёл такого заказчика, возможно заказывает всякие боты, которые бегают по сайтам с WP и оставляют "следы" типа вашего.

Резюме: если движок или дизайн скачали не на офф.сайте, то ищите в коде "morfius542"

M
На сайте с 04.12.2013
Offline
223
#5

Также это может быть какой-нибудь плагин.

---------- Добавлено 03.10.2016 в 03:31 ----------

Или даже хак, например мобильный редирект в .htaccess, хотя я проверил на разных девайсах – у меня везде 404-ый статус выдается.

RT
На сайте с 02.10.2016
Offline
4
#6

Рылся в коде вообще где можно. Прогнал черёд xeny link. И полная тишина. На сайте такой странички нет. Это внешняя инфа.

На фрилансе нет информации про эту страницу. Там просто указан логин.

Это просто логин в скайпе. Но не верю, что скайп будет такое делать.

---------- Добавлено 03.10.2016 в 14:14 ----------

Doma-in, вот теперь вопрос можно ли сделать это автоматически? Вручную перерыл везде. Даже в БД залез, думая что может так что где.

RT
На сайте с 02.10.2016
Offline
4
#7

Наткнулся на интересную штуку

это внутренние ссылки, и самое интеерсное что внутри этих ссылок нет никакого перенаправления на тот адрес.

RT
На сайте с 02.10.2016
Offline
4
#8

Может софт порекомендую через который можно прогнать?

Aisamiery
На сайте с 12.04.2015
Offline
319
#9

Отключите в яндекс метрике настройку добавлять страницы на индексирование. Нашел тут страницы свои на сайте с параметрами дэбага, которые руками в строку вписывал сам

Разработка проектов на Symfony, Laravel, 1C-Bitrix, UMI.CMS, OctoberCMS
RT
На сайте с 02.10.2016
Offline
4
#10

Aisamiery, так у меня добавляются страницы. Получается на индекс ничего не будет отправляться, а это мне нужно наоборот. Мне нужно найти врага моего и понять где он притаился. Я так понимаю он где то внутри. Потому что внешне ни один поисковик таких страниц не выдаёт.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий