Как узнать, заходил ли робот на сайт?

123 4
C
На сайте с 19.09.2001
Offline
120
#11
ну ладно, допустим, что робот заходит, но не индексирует

Робот только и делает, что индексирует, тем более когда все-таки приходит на сайт. ;)

Есть способы понять, почему он этого не делает?

Есть, нужно проанализировать, какие страницы робот запрашивает и что отдает ему при этом сервер, затем проанализировать, какие страницы робот не берет и посмотреть на местности, что ему может мешать.

С уважением, Владимир Чернышов. (не)?путевые заметки (http://chernyshov.kiev.ua/)
В
На сайте с 22.09.2004
Offline
18
#12

а как пранализировать что роботу отдает сервер?

C
На сайте с 19.09.2001
Offline
120
#13

Смотреть коды ответа сервера:

83.237.17.29 - - [22/Sep/2004:11:07:21 +0400] "GET /about HTTP/1.1" 200 16296
В
На сайте с 22.09.2004
Offline
18
#14

а может такое быть, что робот вообще не может попасть на сайт? и соответсвенно в логах не проявится? :)

Alex Kirillin
На сайте с 11.01.2004
Offline
105
#15
а может такое быть, что робот вообще не может попасть на сайт? и соответсвенно в логах не проявится?

Может. Только тогда у вас бы ни одной страницы не было проиндексировано.

Александр Кириллин «Аладна» - Студия дизайна / Разработка сайтов (http://www.aladna.ru/) «Аладна» - Поисковая оптимизация / Продвижение сайтов (http://seo.aladna.ru/)
В
На сайте с 22.09.2004
Offline
18
#16

так это моя ситуация и есть!!!! Ни одной страницы не проиндексировано :(

Ну что же делать!!?? :(

Alex Kirillin
На сайте с 11.01.2004
Offline
105
#17
Как первые три были, так и есть..А уже сентябрь!!!
так это моя ситуация и есть!!!! Ни одной страницы не проиндексировано

Чегой-то я не понял. То три страницы, то ни одной. Ась?

В
На сайте с 22.09.2004
Offline
18
#18

три страницы было с самого начала. А потом сайт был полностью переделан..вообще другая структура, другой дизайн..И после того как это все другое появилось (в июле), ничего проиндексировано не было. а уже сентябрь. почти 4 месяца..Это же ненормально, что яндекс так долго не заходит на сайт? В чем тут может быть дело?

В
На сайте с 22.09.2004
Offline
18
#19

Только что поняла, что робот заходит на сайт. Но не хочет идти вглубь. по ссылкам :( что за фигня? почему? :(

K
На сайте с 31.01.2001
Offline
737
#20

Может что-то со ссылками? А адрес сайта секретный?

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
123 4

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий