lexone: Меня единственно бесит в программе это медленный сбор. Так как прокси уж очень дорого стоят если покупать. А сам если включаю в 5 потоков через время просто перестает парсить. А так уходит 10-12 часов на 15к ключей при парсинге "!".
http://buy.fineproxy.org/ 6$ (на 30 дней) - 70 прокси. С лихвой хватает, и прекрасно парсит. Ваш пост мне знаком) я делал также в 5 потоков, но через 20-30 минут реконект интернета делал (динам. ip) тогда все так прекрасно 🍿
Sterh: Угу.. боремся... Приношу свои извинения. Видимо в ближайшие день-два будем падать регулярно.
Но, собственно для того и тестируем, что все настроить и не падать.
Временно недоступно В данный момент наблюдаются проблемы связи с сервером Page Weight Online, поэтому сервис временно недоступен. Приносим извинения за неудобства. Попробуйте позже.
Я размышлял, раз агрегаторы ссылок пишут - это ВЧ и т.п. (имеет смысл их собирать) :-) на сколько я помню в руках это было :) -> да согласен, это клиенту больше для отчета необходимо.
Меня единственно бесит в программе это медленный сбор. Так как прокси уж очень дорого стоят если покупать. А сам если включаю в 5 потоков через время просто перестает парсить. А так уходит 10-12 часов на 15к ключей при парсинге "!".
http://buy.fineproxy.org/ 6$ (на 30 дней) - 70 прокси. С лихвой хватает, и прекрасно парсит. Ваш пост мне знаком) я делал также в 5 потоков, но через 20-30 минут реконект интернета делал (динам. ip) тогда все так прекрасно 🍿
Угу.. боремся... Приношу свои извинения. Видимо в ближайшие день-два будем падать регулярно.
Но, собственно для того и тестируем, что все настроить и не падать.
Сайты которые ушли в очередь, не потеряются?) :)
Подняли обратно. Пока очередь придется растянуть. Сейчас срочно наращиваем мощности.
Успел подать запрос :) на 7500 примерно страниц
А можно более конкретней?
Готовится сервис.... что за сервис, чем он полезный будет, о чем он...
Уже лежим :) Парсер пашет, клиентская часть легла. аврал, аларм и все такое :(
И не прошло и часа 🍿 Ждем, а пока слушаю вебинар от Гроховского :)
Отлично! Поздравляю! Когда будет, доступен?
В данный момент наблюдаются проблемы связи с сервером Page Weight Online, поэтому сервис временно недоступен. Приносим извинения за неудобства. Попробуйте позже.
Кнопка
Для кого? по нажатию ничего...
вопрос в том, зачем это нужно узнать?
Я размышлял, раз агрегаторы ссылок пишут - это ВЧ и т.п. (имеет смысл их собирать) :-) на сколько я помню в руках это было :) -> да согласен, это клиенту больше для отчета необходимо.
P.S. Может и ошибаюсь...
Он будет автономным, не зависящим от открытого браузера?
Тоже этот вопрос интересует, в идеале автономный хочется интрумент.
P.S. ruizAv имел ввиду, Sterh и exp131 , я пользователь.
Как можно узнать какие ключи - НК, СК, ВК /НЧ, СЧ, ВЧ ? :)