Как узнать какие страницы не в индексе Яндекса?

AlexUp
На сайте с 21.07.2010
Offline
33
5409

Недавно стал вопрос: как узнать какие страницы сайта находятся не в индексе Яндекса?

Со страницами в индексе все понятно, можно через Яндекс (расширенный поиск по сайту), можно через вебмастер (но вебмастер не выводит страницы, которые не в индексе)

А как узнать про страницы, которые не попали в индекс Яндекса?

TS
На сайте с 26.06.2008
Offline
36
#1

например методом исключения - взять и сравнить список всех имеющихся страниц сайта со списком страниц в индексе.

CenaMashin.ru (http://cenamashin.ru) - Сколько стоит твоя машина?
AlexUp
На сайте с 21.07.2010
Offline
33
#2

Для того, чтобы сравнить - нужно чтобы была карта сайта сгенерирована... а если ее нет?

Если страниц на сайте около 1000, то в ручную сравнивать как-то трудозатратно по времени...

Webit
На сайте с 13.12.2006
Offline
240
#3

Карту сайта сделайте и сравните

[Удален]
#4

ЯВ попробуйте

aklimovv
На сайте с 18.01.2008
Offline
224
#5

Конечно сделайте карту сайтов, в сети таких сервисов полно, ну например http://www.sitemapgenerator.ru/

AlexUp
На сайте с 21.07.2010
Offline
33
#6
BtopB:
ЯВ попробуйте

А что такое ЯВ?

PS: как вариант знаю такой способ:

делаем карту сайта, добавляем сайт в SAPE, так чтобы все страницы были проиндексированы его роботом, а потом проверяем плагином на наличие страниц в индексе - это практически автоматизированный способ, но геморный...

может, кто-нибудь лучше предложит?

nastyffka
На сайте с 09.03.2009
Offline
71
#7
AlexUp:
А что такое ЯВ?

PS: как вариант знаю такой способ:
делаем карту сайта, добавляем сайт в SAPE, так чтобы все страницы были проиндексированы его роботом, а потом проверяем плагином на наличие страниц в индексе - это практически автоматизированный способ, но геморный...

может, кто-нибудь лучше предложит?

http://webmaster.yandex.ru/

Сегодня они (навальнята) выходят на несанкционированные митинги, а завтра будут на крыши с ракетницами лазить, чтобы натовские бомбардировщики на Воронеж наводить (с). Я знаю о птицах много (http://www.rivervillevieille.com/)
AK
На сайте с 14.09.2010
Offline
75
#8

Получить список страниц с сервера.

Получить список проиндексированных страниц в Яндекс Вебмастере.

Отсортировать и сравнить.

ls|sort|uniq|fc

AlexUp
На сайте с 21.07.2010
Offline
33
#9

Яндекс Вебмастер выводит только страницы в индексе Яндекса, а страницы не в индексе (те которые загружены) не выводит...

[Удален]
#10
Яндекс Вебмастер выводит только страницы в индексе Яндекса

А вам какие надо???

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий