вопрос о роботе Яндекса

K
На сайте с 05.09.2007
Offline
55
631

есть сайт, ему не более 2 недель. на сайт ежедневно ходит робот Яндекса и вызывает непонятные мне страницы

83.222.5.171 - - [27/Jan/2009:15:59:38 +0200] "GET /cool.php/test907437940.html HTTP/1.0" 404 - "-" "Yandex/1.01.001 (compatible; Win16; I)"

83.222.5.171 - - [27/Jan/2009:15:59:40 +0200] "GET /cool.php?link_page=907437940 HTTP/1.0" 404 - "-" "Yandex/1.01.001 (compatible; Win16; I)"

83.222.5.171 - - [28/Jan/2009:20:25:41 +0200] "GET /cool.php/test480335620.html HTTP/1.0" 404 - "-" "Yandex/1.01.001 (compatible; Win16; I)"

83.222.5.171 - - [28/Jan/2009:20:25:44 +0200] "GET /cool.php?post480335620html HTTP/1.0" 404 - "-" "Yandex/1.01.001 (compatible; Win16; I)

и так каждый день

ни одной страницы сайта не скушал лишь проверяет выше указанные страницы

может кто нибудь в курсе происходящего?

kurazh добавил 01.02.2009 в 22:09

что никто не знает?

andolini
На сайте с 23.03.2008
Offline
21
#1

Yandex/1.01.001 (compatible; Win16; I) — основной индексирующий робот

Вы бы сказали на чем сайт стоит, или показали, а то так трудно что то сказать...

Можно robots.txt файл посмотреть, может там что то...

Просто так Яша не стал бы эти страницы дергать:)

...
Slc
На сайте с 27.06.2003
Offline
150
Slc
#2

Если робот дергает странички, значит они есть в базе. А находит он урлы по ссылкам. Следовательно на эти страницы где-то стоят (или стояли) ссылки. Либо на вашем сайте, либо не на вашем. Другого не дано. Ищите.

aphextwin2000
На сайте с 11.12.2006
Offline
85
#3

ну вы хоть если не даете на рассмотрение сайт, то проверьте, что за странички..

может от индексации их закрыть, чтоли..

В топ независимо от алгоритма! Продвижение статьями (http://miralinks.ru/users/registration/from:112463) здесь. Продвинуть сайт (http://seopult.ru/ref/46dea49bdf0dfd84) - теперь легко :)
Delarante
На сайте с 13.07.2008
Offline
69
#4
aphextwin2000:
ну вы хоть если не даете на рассмотрение сайт, то проверьте, что за странички..
может от индексации их закрыть, чтоли..

Так этих страниц сейчас как я понял и вовсе нет и небыло.

Домен новый? Раньше на нем ни чего не стояло?

В кэше этих страниц нет?

segavor
На сайте с 02.02.2009
Offline
35
#5

где то кривые урлы стоят старые бэки от предидущего хозяина домена!

Либо хостер ссылается на закрытые страницы!

Мощный SEO софт. (http://www.botmasterru.com/product27676/)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий