Видимость сайта для поисковиков

[
На сайте с 18.06.2005
Offline
3
411

Подскажите как узнать, что видят роботы на сайте?

Я имею в виду не проиндексированые страницы, а страницы, которые возможно по какой-то причине не индексируются.

Или их просто не видят роботы?

(Подозреваю что на сайте что-то не так :rolleyes:)

TheBat
На сайте с 03.08.2004
Offline
173
#1

Ну и формулировка вопроса :)

Посмотрите роботс.txt и поймёте что не видет робот. Посмотрите кэш поисковика и увидите то, что он уже нашел. Делмайте соответствующие выводы.

Максим
6666
На сайте с 10.01.2005
Offline
505
#2

РР или другая программа, имитирующая спайдеры может помочь. Хотя я не знаю, насколько она в ладах с "кривыми" ссылками. Может кто поумнее дополнит...

Каждое мое сообщение проверила и одобрила Елена Летучая. (c) Для меня очень важно все что Вы говорите! (http://surrealism.ru/123.mp3) .
[
На сайте с 18.06.2005
Offline
3
#3
TheBat:
Ну и формулировка вопроса :)

да согласен...

TheBat:
Посмотрите роботс.txt и поймёте что не видет робот.

а робот.тхт нету.. на сколько я знаю он необязателен если нет необходимости запрещать индексацию страниц

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий