Что за странные запросы Рамблера?

D
На сайте с 28.06.2008
Offline
1114
464

В логах нашел, что Робот Рамблера упорно пытался пройти по несуществующим адресам, откуда он их взял?

jpg 1.jpg
[Удален]
#1
Dram:
В логах нашел, что Робот Рамблера упорно пытался пройти по несуществующим адресам, откуда он их взял?

Возможно они были раньше.

D
На сайте с 28.06.2008
Offline
1114
#2

Их раньше не было, а IP бота реально принадлежит Рамблеру

devzev
На сайте с 13.08.2008
Offline
246
#3
labsmoseo:
Возможно они были раньше.

Возможно, туда тупо ведут внешние/внутренние ссылки.

[Удален]
#4
devzev:
Возможно, туда тупо ведут внешние/внутренние ссылки.

А еще возможно движок генерит эти страницы временно.

MyOST
На сайте с 22.01.2006
Offline
559
#5
Dram:
Их раньше не было

ну что возможно - devzev уже назвал, а то что Вы говорите что "не было" - это от Вас их не было :)

а кто-то какой-нить дорчег мог туда подвешать...

Блог (http://seom.info/) | Ты уже SEO профессионал? (http://www.key-collector.ru/) Развиваем семантику более 8 лет! ()
D
На сайте с 28.06.2008
Offline
1114
#6

Джумла ссылки такого вида не генерит, я подобные никогда не создавал, такое поведение Рамблер бота замечено впервые, логи просматриваю постоянно.

А вот с дорчиком, можно по подробнее, как выявить и почему робот получает код ответа 302, а не 404?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий