Key Collector - автоматизированная система анализа семантического ядра. Часть 8.

[Удален]
#411

умеет ли программа смотреть выдачу гугла в сша (и по другим регионам)? или он только по ру оценивает ключи?

спасибо

MIND
На сайте с 08.03.2007
Offline
238
#412
webmbilo:
умеет ли программа смотреть выдачу гугла в сша (и по другим регионам)? или он только по ру оценивает ключи?
спасибо

Умеет. В настройках устанавливается или же при запуске процесса.

Key Collector - автоматизированная система анализа семантического ядра (/ru/forum/863504)
DS
На сайте с 09.02.2008
Offline
137
#413

MIND, MyOST,

Прежде всего спасибо за софт! Сам не обладаю), но частично видел, собираюсь купить. Есть вопрос, а реально ли работать вообще без прокси? но допустим с большими задержками. В свое время парсил вордстат собственными скриптами, и при большой задержке это можно было делать по 10 часов и целый месяц. А с вашим софтом как? Я видел он позиции снимает, и тд, т.е. много кого дёргает. Реально ли выжить с большими задержками? (пусть медленно)

А в тему проблемы прокси, к вам такая мысль, а не хотели бы взять сервер, чтобы предоставлять доступ к серверу через кей-коллектор.

А на сервере закупить айпи (они были у некоторых за 30 руб. за штуку в месяц), и организовать работу софта через сервер, но с цикличной прокруткой по всем айпи?)

Как сторонний пример: покупаем 10 айпи, используем курл интерфейс ;), крутимся по кругу, а если еще и с минимальными задержками, то вообще шикарно.

Если что, в личке объясню что имею ввиду. Но вот не знаю, насколько это можно именно через ваш софт организовать и без интерфейса. Но смысл спалённой темы думаю ясен;)

юни
На сайте с 01.11.2005
Offline
911
#414
D.Sokolov:
Но смысл спалённой темы думаю ясен

:) Последние 2-3 года для работы в промышленных масштабах не хватает блоков ip, размеру которых позавидует иной провайдер. Увы, это не вариант.

https://a-parser.com/ - парсер для профессионалов SEO, маркетологов, арбитражников и SaaS, https://searchengines.guru/ru/forum/944108 - прокси-сервис на базе операторов домашнего интернета, сотни тысяч IP-адресов, канал от 20 Мбит
MyOST
На сайте с 22.01.2006
Offline
559
#415
D.Sokolov:
Есть вопрос, а реально ли работать вообще без прокси? но допустим с большими задержками

все зависит от объемов парсинга, если это десятки и сотни тысяч слов, которые нужно БЫСТРО пропарсить (например на частотность), то тут нужно много IP адресов и большие таймауты.

Если время НЕ критично, то конечно, можно и без больших объемов прокси работать.

Яндекс сильно ужесточил требования. Но можно через директ снимать, там банов IP меньше, но чаще капча.

D.Sokolov:
Реально ли выжить с большими задержками? (пусть медленно)

от объемов, но в целом можно

D.Sokolov:
А в тему проблемы прокси, к вам такая мысль, а не хотели бы взять сервер, чтобы предоставлять доступ к серверу через кей-коллектор.

юни выше отписался, вот он как раз сейчас и есть этот сервис - seo-proxy.ru, пул IP большой, но как видите - проблемы тоже большие, речь не о тысячи IP даже идет.

Мы занимаемся СВОИМ делом, организация такого сервиса пока в НАШИ планы развития не входит - прибыль не велика, а проблем много (с сервисом парсером-то).

Но в целом, в Коллекторе реализована работа с кэшированием запросов - т.е. пользователь сначала к нам за частотностью обращается, затем к яндексу, получается сглаженный эффект, меньше обращений и банов, но они все-равно есть и будут на больших объемах.

Блог (http://seom.info/) | Ты уже SEO профессионал? (http://www.key-collector.ru/) Развиваем семантику более 8 лет! ()
DS
На сайте с 09.02.2008
Offline
137
#416
юни:
:) Последние 2-3 года для работы в промышленных масштабах не хватает блоков ip, размеру которых позавидует иной провайдер. Увы, это не вариант.

А если масштабы промышленные, но на уровне аккаунта? у каждого клиента коллектора свой аккаунт, надо ему парсить много? - пусть покупает 10 айпи на сервере. Но айпи эти будут чётко за ним и никто больше юзать не будет, соответственно не будет столько банов как если тонна народа юзает одни и те же прокси, ну или найти баланс.

Или суть в том что клиентов у коллектора столько, что столько блоков айпи не купить?)

Юни - это случайно не с умакса?))

alekzey
На сайте с 19.09.2005
Offline
140
#417
D.Sokolov:
А если масштабы промышленные, но на уровне аккаунта? у каждого клиента коллектора свой аккаунт, надо ему парсить много? - пусть покупает 10 айпи на сервере. Но айпи эти будут чётко за ним и никто больше юзать не будет, соответственно не будет столько банов как если тонна народа юзает одни и те же прокси, ну или найти баланс.

А зачем это, если те, кто парсят много - могут взять VDS/сервер и к нему прикупить IP и с гарантией парсить только для себя? :)

WBR, AlekZey Абарис (http://abaris.ru) - продвижение сайтов в Новосибирске (http://www.siteseo.ru) Как узнать траст домена (http://abaris.ru/trust.html)
DS
На сайте с 09.02.2008
Offline
137
#418

alekzey, примерно о том и речь, могут ( а в коллекторе есть круговой обход?), но надо организовывать это дело через ВДС, скриптом, софтом. Не все наверно знают как это делать.

+ надо следить за айпи, какие отвалились, покупать новые. А тут всё это дело было бы на стороне - айпи в блеклист попало, автоматом покупается новое, точнее заменяется.

+ пробить огромные скидки на айпи, за счёт огромного опта. Чтобы было дешевле чем на вдсках.

юни
На сайте с 01.11.2005
Offline
911
#419
D.Sokolov:
за счёт огромного опта

Сейчас не хватает даже сотен тысяч адресов.

D.Sokolov:
ну или найти баланс

Пока не получается. Дело тут не количестве, вордстатовцы банят подсетями и, скажем так, превентивно.

P.S. Нет, не с умакса.

R
На сайте с 16.02.2012
Offline
33
#420

Посоветуйте ради бога рабочие прокси для яши, т.е. парсинга вордстата, ну не реально столько ждать. Желательно в личку! Все мною испробованые давненько в бане. Работать хочется - но без прокси не можется...

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий