Яндекс явно что-то ищет

12
D1
На сайте с 26.02.2013
Offline
61
2651

Добрый вечер, господа. :kozak:

Подскажите пожалуйста, что пытается найти Яндекс на моём новом сайте последние пару дней. Уже два раза переходил, ловил 404 ошибку, но откуда у него взялась такая ссылка:

"GET /78e79aaa-193e..."

Вряд ли это что-то вроде "поиска идентификатора", так как в мета-тегах уже давно подтвердил сайт на Яше. Больно чудная страница – там примерно в три раза больше символов, по сравнению с той строчкой что я показал в примере выше (та что с параметром GET). К тому же эти символы не совпадают с самим идентификатором Яндекса.

Ваши идеи? :confused: :idea:

Мой сайт - klinok.pl.ua.
Старый комп
На сайте с 03.01.2016
Offline
68
#1

В этой теме уже обсуждают - /ru/forum/comment/14669141

Доска объявлений России ( https://www.board-rus.ru/ )
Piligrim4x4
На сайте с 14.12.2009
Offline
97
#2

А это точно бот Яндекса?

Теория и практика размещения заказов (https://forum.pro-zakupki.su)
D1
На сайте с 26.02.2013
Offline
61
#3
Piligrim4x4:
А это точно бот Яндекса?

Сейчас найду лог скину последнюю часть

Kronbberg
На сайте с 14.03.2011
Offline
62
#4

Начнем с самого главного - какой айпишник у этого "бота". Второе - какая периодичность "поиска"?

::::::::::LinkBoss.net - Трастовые ссылки для увеличения трафика в 10 раз! (http://linkboss.net/)::::::::::
D1
На сайте с 26.02.2013
Offline
61
#5

"Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"

Кстати, сначала он заходит в robots.txt, после через 5 секунд на ту странную ссылку. Вот его IP: 130.193.50.201. Проверка показала, что это домен spider-130-193-50-201.yandex.com. Окончание "yandex.com" – вроде как настоящий.

---------- Добавлено 10.09.2016 в 21:11 ----------

Периодичность – около 16-ти часов.

---------- Добавлено 10.09.2016 в 21:13 ----------

Из роботса он никак не мог взять ту ссылку – в нём только две строки "host" и "sitemap"

L
На сайте с 07.12.2007
Offline
351
#6
dpakyj1a:
откуда у него взялась такая ссылка:
"GET /78e79aaa-193e..."

Это он ищет на сайтах папки от биржи ссылок типа sape для вычисления тех, кто продаёт ссылки.

Piligrim4x4
На сайте с 14.12.2009
Offline
97
#7

Лажа это какая то! ИМХО

I
На сайте с 01.05.2015
Offline
72
#8
Piligrim4x4:
Лажа это какая то! ИМХО

это не лажа, это че то крякнуло хорошенько там...

на новом сайте 2 недели от роду, вошли страницы в индекс, и выдало мне в вебмастере 100 +- 404 ошибок, хотя на сайте 10 страниц всего.

Полез смотреть сраницы, а они все одного типа:

http://domain.ru/material1/http://domain.ru/material2/

http://domain.ru/material2/material3/

http://domain.ru/material2/material3/http://domain.ru/material1/

Яша ответил, что типа может у вас домен был дропнутый или ссылки такие на ваш сайт стояли... и от куда робот взял такую инфу по ссылкам сказать не могут, типа это не хранится в их базе.

L
На сайте с 07.12.2007
Offline
351
#9
Piligrim4x4:
Лажа это какая то! ИМХО

Не, не лажа. Яндекс точно знает, что делает, запрашивая такие Url.

У вас где-то в абсолютных ссылках пропущен начальный /. Поэтому они лепятся к текущему Url страницы, как будто это относительные Url.

С помощью Xenu можно найти на каких страницах есть такие кривые ссылки.

A
На сайте с 20.08.2010
Offline
775
#10

Надо в шапку прилепить, как поставить галку в метрике "Запрет отправки на индексацию страниц сайта", забудете раз и навсегда о таких урлах. Каждую осень одно и то же.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий