Gnev88

Рейтинг
87
Регистрация
09.04.2010

Семонитор хоть и медленный, кривой, лагучий, сделан криворукими прогерами, но он работает, дает статистику за весь периуд в виде таблицы и ставит визуально плюс или минус при изменении позиций.

orka13:
Цифра 600 ничего не значит. Вы запустите проверку прокси с включенной опцией «Считать закапченные прокси серверы плохими». Вот тогда узнаете, сколько реально прокси рабочих в списке. Я при 100-200 незакапченных прокси ставлю «задержку 2500-5000 мс» и «Количество потоков 30-50». Пока экспериментировал для нахождения идеальных параметров, то также были приколы, когда парсинг заходил в ступор.
В Язли другой алгоритм работ с проксями. Он возможно находит пару рабочих среди ваших 600 прокси и нагружает их по максимуму, вот и успевает собрать данные, пока не словит капчу.

Получилось снимать данные при условии что проверенные прокси на доступность в 3 потока с таймаутом 10 000 были очищены от неработающих на данный момент и выставленны на снятие таймаут от 6000 до 29000, снятие пошло и релевантные и позиции какие то, только долго это, но главное что работает.

nickspring

У вас отличная программа, но юзабилити и дизайн делают программисты, а не те кто должен отвечать за удобность инструмента и его правильное отображение результата, пожалуйста отдайте его специалистам кто проектирует интерфейсы, будет сказка, продукт четвертый год пользуюсь и приобрел из за доверия и CS Sape Master так же, там тоже мелкие косяки и если бы сделать немного автоматизацию то и сапоский интерфейс ненужен был бы вообще заходить.

При проверки на уникальность всего сайта, выдается статистика по 1 странице, а не сразу список из страниц, инструмент сделан, но как всегда он на уровне 90-ых неудобно и никак не использовать, научитесь делать сразу правильно, требуется готовый список со всеми страницами рядом с которыми будет % уникальности стоять, выгрузка тоже нужна сразу всех страниц, а не 2000 штук по 1 выгружать или просматривать, визуальная часть в вашей программе на уровне сделали и ладно прогеры, юзабилити слабое.

Содержание объявления:
В объявлении должен быть указан размер оплаты труда. Допустимо указать точный размер, минимальную зарплату или вилку зарплаты.

Правильно: оклад 30000 рублей + премия
Правильно: зарплата от 30000 рублей
Правильно: зарплата 30000-70000 в зависимости от квалификации

Нельзя: размер зарплаты обсуждаем
Нельзя: зарплата по результатам собеседования

Для найма со сдельной формой оплаты труда допускается указать размерность подсчета работ, стоимость единицы и обязательно указать минимальный гарантированный ежемесячный объем работ.
Пример (правильно): 3 доллара за 1000 знаков, гарантирую минимальный объем заказов 100000 знаков в месяц.
Пример (неправильно): оплата 3 рубля за пост.

Объявления без указания гарантированного объема работ будут считаться разовыми и удаляться.

Полезно читать правила в начале, зарплату вы должны указать что бы отсечь все вопросы и получать только заявки от кандидатов. Укажите размер оплаты и у вас будут заявки нужные вам же.

Совершенно не ясно какой заработок, укажите вилку оплаты за N количество проектов. В правилах четко указано что оплата должна присутствовать что бы избежать недопонимания.

экспериментами добился что прокси при откидывании к примеру 5 проксей, отключается сбор, хотя их там еще 600, поставил таймауты до 30 000 стали собираться, но прокси не перебираются до тех пор пока не будут откинуты все, с яндексом все время беда по сбору, думаю если бы не отключался сбор все до собиралось быстро.

Работать нужно с сайтом, что бы он был со всех сторон удобный и полностью соответствовал запросам и даже дополнял их больше чем другие, а не с ссылками, сайт важнее чем ссылочная масса чем как раньше закупил 10000000 ссылок и все.

Еще я проверяю через Yazzle с проксями с 4 шинглом.

Всего: 529