Key Collector - автоматизированная система анализа семантического ядра. Часть 8.

умеет ли программа смотреть выдачу гугла в сша (и по другим регионам)? или он только по ру оценивает ключи?

спасибо

Умеет. В настройках устанавливается или же при запуске процесса.

MIND, MyOST,

Прежде всего спасибо за софт! Сам не обладаю), но частично видел, собираюсь купить. Есть вопрос, а реально ли работать вообще без прокси? но допустим с большими задержками. В свое время парсил вордстат собственными скриптами, и при большой задержке это можно было делать по 10 часов и целый месяц. А с вашим софтом как? Я видел он позиции снимает, и тд, т.е. много кого дёргает. Реально ли выжить с большими задержками? (пусть медленно)

А в тему проблемы прокси, к вам такая мысль, а не хотели бы взять сервер, чтобы предоставлять доступ к серверу через кей-коллектор.

А на сервере закупить айпи (они были у некоторых за 30 руб. за штуку в месяц), и организовать работу софта через сервер, но с цикличной прокруткой по всем айпи?)

Как сторонний пример: покупаем 10 айпи, используем курл интерфейс ;), крутимся по кругу, а если еще и с минимальными задержками, то вообще шикарно.

Если что, в личке объясню что имею ввиду. Но вот не знаю, насколько это можно именно через ваш софт организовать и без интерфейса. Но смысл спалённой темы думаю ясен;)

:) Последние 2-3 года для работы в промышленных масштабах не хватает блоков ip, размеру которых позавидует иной провайдер. Увы, это не вариант.

все зависит от объемов парсинга, если это десятки и сотни тысяч слов, которые нужно БЫСТРО пропарсить (например на частотность), то тут нужно много IP адресов и большие таймауты.

Если время НЕ критично, то конечно, можно и без больших объемов прокси работать.

Яндекс сильно ужесточил требования. Но можно через директ снимать, там банов IP меньше, но чаще капча.

от объемов, но в целом можно

юни выше отписался, вот он как раз сейчас и есть этот сервис - seo-proxy.ru, пул IP большой, но как видите - проблемы тоже большие, речь не о тысячи IP даже идет.

Мы занимаемся СВОИМ делом, организация такого сервиса пока в НАШИ планы развития не входит - прибыль не велика, а проблем много (с сервисом парсером-то).

Но в целом, в Коллекторе реализована работа с кэшированием запросов - т.е. пользователь сначала к нам за частотностью обращается, затем к яндексу, получается сглаженный эффект, меньше обращений и банов, но они все-равно есть и будут на больших объемах.

А если масштабы промышленные, но на уровне аккаунта? у каждого клиента коллектора свой аккаунт, надо ему парсить много? - пусть покупает 10 айпи на сервере. Но айпи эти будут чётко за ним и никто больше юзать не будет, соответственно не будет столько банов как если тонна народа юзает одни и те же прокси, ну или найти баланс.

Или суть в том что клиентов у коллектора столько, что столько блоков айпи не купить?)

Юни - это случайно не с умакса?))

А зачем это, если те, кто парсят много - могут взять VDS/сервер и к нему прикупить IP и с гарантией парсить только для себя? :)

alekzey, примерно о том и речь, могут ( а в коллекторе есть круговой обход?), но надо организовывать это дело через ВДС, скриптом, софтом. Не все наверно знают как это делать.

+ надо следить за айпи, какие отвалились, покупать новые. А тут всё это дело было бы на стороне - айпи в блеклист попало, автоматом покупается новое, точнее заменяется.

+ пробить огромные скидки на айпи, за счёт огромного опта. Чтобы было дешевле чем на вдсках.

Сейчас не хватает даже сотен тысяч адресов.

Пока не получается. Дело тут не количестве, вордстатовцы банят подсетями и, скажем так, превентивно.

P.S. Нет, не с умакса.

Посоветуйте ради бога рабочие прокси для яши, т.е. парсинга вордстата, ну не реально столько ждать. Желательно в личку! Все мною испробованые давненько в бане. Работать хочется - но без прокси не можется...