Загружено роботом и в индексе

П
На сайте с 16.01.2013
Offline
37
1618

Подскажите пожалуйста как увидеть список страниц, которые в яндекс.вебмастер показываются как загруженные роботом, но которых нет в индексе? И какие есть средства, чтобы ликвидировать этот разрыв.

Сайт уже существует больше года

D2
На сайте с 01.11.2011
Offline
56
#1

Там же написано:

Загружено: столько-то

Исключено: столько то.

Смотрите те которые исключены.

Чаще всего это то что запрещено в роботс или отдает 404.

M
На сайте с 23.12.2010
Offline
84
#2

Разрыв не изменить. Яндекс обычно быстро загружает новые страницы, но в выдачу их кидает только после того как они просуществуют какое то время.

P
На сайте с 13.02.2013
Offline
5
#3

Если сайту больше года, то загруженных страниц больше, чем их есть на самом деле. В это число входят страницы с noindex и страницы, у которых есть баги в кодах, которые выдают 404. Например, есть ряд дочерних страниц, обозначенных цифрами. Но со 2 страницы не видно 5. Вот это загруженная, а потом исключённая страница. По факту пятая страница в индексе, но одновременно - загружено-исключённая.

keche
На сайте с 26.05.2012
Offline
17
#4

в панели вм написано сколько загружено, сколько в индексе, сколько исключено.

присмотритесь внимательнее, там есть подсказки и справки.

П
На сайте с 16.01.2013
Offline
37
#5
keche:
в панели вм написано сколько загружено, сколько в индексе, сколько исключено.
присмотритесь внимательнее, там есть подсказки и справки.

Страниц в поиске 3245

Внешних ссылок на страницы сайта 73

Дата последнего посещения сайта роботом 3.04.2013

Загружено роботом 4157

Исключено роботом 149

Как видно "Исключено роботом" не равно ("Загружено" минус "В поиске"). Где посмотреть оставшиеся 800 страниц?? Если б можно было бы хотя бы выгрузить список в эксель, которые в "Загружено" и которые в "Исключено", то можно было бы найти непересечения. Но глазами искать их это совсем не вариант

П
На сайте с 16.01.2013
Offline
37
#6

Подскажите плиз

Vaan32
На сайте с 23.05.2011
Offline
175
#7

он может отдельные страницы очень долго проверять, на их ценность например и релевантность. если же не найдет, то просто не пустит в индекс.

Все логично и просто

у вас эти страницы содержат хоть какой-то контент? Вообще на вашем сайте столько страниц есть? Дубли? не может такого быть?

Басист басисту друг, товарищ и запасной бас
SmileP
На сайте с 18.02.2010
Offline
386
#8
Пуся:
Где посмотреть оставшиеся 800 страниц?

Не находил таких данных, скорее всего нигде.

Как вариант- шаманить с кмс/сервером, чтобы составлялся список запрашиваемых ботом урлов.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий