А возможно ли реализовать такую штуку - когда поисковик не отвечает на запрос (недоступен, каптча, редирект и т.п.), делать определенную паузу, после чего повторять тот же запрос, а не переходить к следующему, а в настройках защиты ip добавить для поисковиков два параметра: пауза после неудачи (каптчи) и количество попыток, после которых переходить дальше?
Ну уж лучше с оффсайта сразу качать.
Alt+A (латинская) ещё хорошо помогают)
в Disallow "*" уберите, и тогда на все поставленные вопросы ответ будет "да" =)
Это после сегодняшнего ночного "недоапа" такое, скорее всего глюк =)
Dolph, у меня для обоих запросов параметр отличается, на всех кластерах одинаковый.
S.Alexeev, используйте "Защиту IP" для выставления пауз между обращениями.
При проблемах с определением позиций именно в яндексе, играйте с паузами, там похоже ещё больше ужесточили антиробота.
Зы. Всегда можно глянуть в файл "C:\Program Files\Seoadministrator\RankingMonitor\yandex.html" и узнать, из-за чего проблемы в конкретном случае.
А возможно ли реализовать такую штуку - когда поисковик не отвечает на запрос (недоступен, каптча, редирект и т.п.), делать определенную паузу, после чего повторять тот же запрос, а не переходить к следующему, а в настройках защиты ip добавить для поисковиков два параметра: пауза после неудачи (каптчи) и количество попыток, после которых переходить дальше?
Может речь не про фронт-сервер, а про кластер всё таки? =)
Обратите внимание: