Форум Практика оптимизации Сервисы и программы для работы с SE

Есть ли софт, чекающий ВСЕ страницы сайта на индекс?

B
На сайте с 05.03.2007
Offline
171
Brut
813

Задача, собрать абсолютно все страницы сайта (в т.ч. зарытые в глубине сайта) и проверить их на индекс.

Результатом должен быть список страниц в индексе яндекса/гугла и список страниц, не вошедших в индекс.

Что-нибудь посоветуете? Может уже есть такая софтина/скрипт? или нечто подобное :)

M
На сайте с 09.02.2008
Offline
68
mlu
#1

Вам нужно одноразово или для многих сайтов? Вторую половину проблемы можно решить :)

B
На сайте с 05.03.2007
Offline
171
Brut
#2

Вообще для многих сайтов, но в данный момент задача стоит собрать данные по страницам одного сайта.

M
На сайте с 09.02.2008
Offline
68
mlu
#3

Если список ссылок соберёте (вроде как большинство софтин для генерации sitemap это умеют), то я могу дать программку (/ru/forum/511667), которая проверит каждую страницу на индексацию в яше/гугле. Многопоточно, через прокси :) Заодно может и PR собрать.

Топвизор запустил инструмент для Чек-лист по продвижению англоязычного В API Яндекс.Вебмастера появилась
Domain Baron
На сайте с 16.03.2010
Offline
162
Domain Baron
#4

Алсубмитер справляется с этой задачей :)

Быть добру!
Сергей Плотников
На сайте с 02.05.2008
Offline
113
Сергей Плотников
#5

Скорее идти от обратного - спарсить выдачу по конкретному сайту и сравнить со списком страниц.

https://vk.com/investorplotnikov мой опыт инвестора Краткий учебник Word ( http://www.autoaf.ru/docs_office_word10.htm ) Пармасруб – срубы в Перми ( http://www.parmasrub.ru ) с бесплатной доставкой в полной комплектации.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий