Парсим Яндекс без проблем

LinkMaster

Спасибо. Надеялся что это серверная версия, т.е. запустил и забыл. Жаль что не так ... А то вводить капчу, блин, замучаешься ведь :)

минут 30 уходит, дня на 3и хватает.. раньше на месяц хватало.. Яша злее стал :) ********у обещают подвязать, ждемс..

Ага, с где-то с середины декабря капча просто как с цепи сорвалась, вручную, при обычном поиске иногда на нее нарываюсь.

А разве сейчас у кого-то есть проблемы с парсингом яши? Имею ввиду не промышленные масштабы, а реальные задачи.

Индексация проверяется через qip на ура, причем без задержек и капч. 30к урлов в день свободно проверяю десктопным софтом, серверным можно больше. Точность как у XML, специально сравнивал.

Для позиций есть Лидер, раз но хостинг залил и забыл. У меня около 4к запросов в сутки проверяет на одном ip. Правда, периодичность и время запуска настроить нельзя, получается что сбор запросов начинается в 24.00, когда выдача нестабильна во время апа. Но надеюсь в новой версии что-то придумают.

C qip проблема: он обрезает длинные запросы, поэтому даже индексацию URL далеко не всегда получается сделать. А уж про индексацию текста на конкретной странице - тем более.

UPD: А сейчас qip вообще не выдает по запросам индексацию страниц. Или у него стал иной от Яндекса язык запросов?

Abramovich, мы знакомы?

Извиняюсь, перепутал. Имел ввиду livejournal. У qip действительно есть некоторые проблемы в этом плане.

Что за ерунда? Вы в кроне сами устанавливаете время когда начинают отрабатывать боты.

Если Яндекс будет последователен в своих действиях (сначала Mail.Ru, потом Qip.Ru), то боюсь, скоро и в ЖЖ прикроют лазейку 😒