- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Все что нужно знать о DDоS-атаках грамотному менеджеру
И как реагировать на "пожар", когда неизвестно, где хранятся "огнетушители
Антон Никонов
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Необходимо собрать проиндексированные и непроиндексированные страницы с сайта в Яндексе или просто проверить на то же самое уже имеющийся список страниц. Руками - не вариант, так как сайт большой. Какой бы сервис вы порекомендовали?
Flexpk, Зачем сервис...? YCCY вам в помощь, главное дайте ей список урлов а она уже определит какие в индексе а какие нет.
Netpeak Spider или xenu парсите сайт а потом уже через YCCY проверяете
Flexpk, Зачем сервис...? YCCY вам в помощь, главное дайте ей список урлов а она уже определит какие в индексе а какие нет.
Он IP не банит? У меня 30к страниц, пишет - осталось 50 часов. yccy обновлялся последний раз в 2013 году.
Неужели нет ничего побыстрее, хотя б платного?
Пользовался до этого Comparser`ом от Алаева - всё было норм до недавнего времени. Он брал данные из Вебмастера, пока Яндекс не ужесточил лимит проверки.
---------- Добавлено 20.07.2015 в 17:56 ----------
Есть альтернатива YCCY?
В сайтрепорте есть такой отчет. Достоверность его не проверял так как смотрел только на демо аккаунте. Но для 30000 страниц - ценник просто ради проверки индексации выйдет заоблачный. А если вообще регулярно проверять то разориться можно.
И еще дополню. Нашел на просторах рунета http://parser.alaev.info/ честно скажу сам не устанавливал и не тестировал, как доберусь до большого компа - попробую, но по описанию вроде подходит.
Если есть список урлов, то попробуйте TOBBOT с модулем SE Index Checker (проверка индексации страниц / доменов в Bing, Google и Яндекс).
Для проверки 30к также понадобятся SOCKS прокси.
Он IP не банит? У меня 30к страниц
Ага, если бы так все было просто. Проще выгрузить из вебмастера проиндексированные и скриптом исключить их из полного списка страниц сайта.
И еще дополню. Нашел на просторах рунета http://parser.alaev.info/ честно скажу сам не устанавливал и не тестировал, как доберусь до большого компа - попробую, но по описанию вроде подходит.
Как раз этим парсером работал до тех пор, пока Яндекс не стал блочить аккаунты вебмастера за частое обращение к нему. Писал об этом в 4ом посте.
Сайтрепорт посмотрю, спасибо.
---------- Добавлено 21.07.2015 в 09:52 ----------
Ага, если бы так все было просто. Проще выгрузить из вебмастера проиндексированные и скриптом исключить их из полного списка страниц сайта.
Хорошая идея, кстати. Но выгрузить список всех страниц можно только из нового вебмастера, а там страшные глюки сейчас - всего 2 страницы в индексе пишет, а в реале около 10к.
---------- Добавлено 21.07.2015 в 09:56 ----------
Flexpk, Зачем сервис...? YCCY вам в помощь, главное дайте ей список урлов а она уже определит какие в индексе а какие нет.
За ночь проверилось только треть всего сайта (10к урлов) и все оказались не в индексе - стопудово, что так быть не может. Случайность? Не думаю :) Совсем не вызывает доверия у меня эта программа.
Пользуюсь Netpeak Spider для скана страниц и RDS API для чека на индексацию. Приходится платить, но удобнее пока ничего не нашел
Проще выгрузить из вебмастера проиндексированные и скриптом исключить их из полного списка страниц сайта.
По API ограничение на 100 страниц. Или есть другие способы?
http://seozoo.ru/tools/pageindexation