DrJeans, ага известный случай кидалова.
_mihey, нет он просто чаще обычного бегает и... обгоняет ;)
Быстроробот.
Кстати, сегодня обратились с интересным случаем. Есть сайт с адресом www.site.ru, соответственно в поле ввода программы ввели site.ru. В результате программа почему-то выдала всего 4 ссылки на сайт, в отличие от скрипта Niklab'a. Как оказалось, у данного сайта site.ru и www.site.ru расклеяны и, соответственно, эти домены - разные сайты для Яндекса. А программа выбирает ссылки с учетом зеркал.
Вы уж определитесь. :)
Признаюсь, что у нас в офисе вообще прокси не используют уже полгода и никого не банили.
Я не Вам предлагал, я говорил про прогу. Разное число бэков каждый раз - это особенность Яндекса.
Через бесплатные прокси тормоза, так всегда было. А так по запросу отлично все тянет.
Их там и не будет. Паузы и другие методы защиты от бана отлично уже полгода на автомате и, имхо, лезть в их настройки врядли требуется.
kagux, надо же для Яндекса делать паузы.
General, пока не ожидается.
GReaTM0deR, встречный вопрос, есть запрос который показывает бэки по Рамблеру? (окромя поиска по тексту ссылок)
А зачем подвал искать??? Возьмите DTD и по нему определяйте блоковые элементы, процентов 95 сайтов попадется... ну и процентов 5 останется с переопределенным свойством display в CSS.