Key Collector - автоматизированная система анализа семантического ядра. Часть 11

J
На сайте с 25.12.2009
Offline
87
#91

с какими доменами google работает кейколлектор??

SR
На сайте с 22.02.2010
Offline
77
#92
MIND:
Провели эксперимент со съемом поисковой выдачи Яндекса. С малыми задержками между запросами капча может появиться уже между каждыми 50 и чаще страницами. Если поставить разумные "человеческие" задержки около 8000 мс (8 сек), то сбор без капчи идет больше чем для 700 запросов (эксперимент еще не закончен, но результаты уже очевидны).

Попробуйте в "настройках - парсинг - поисковая выдача" для ПС Яндекс поставить задержки от 8000 до 10 000 мс. При этом кол-во потоков не должно превышать кол-во используемых в работе IP-адресов.

Вы что снимали? Позиции? На динамическом айпи, т.е. на свежем адресе даже с задержками в 40000-50000 мс при съеме конкуренции в яндексе - 4-5 запросов и капча в один поток. Да, отключал съем дополнительных параметров выдачи, думал, поможет, ан нет.

F8
На сайте с 13.10.2010
Offline
79
#93
Провели эксперимент со съемом поисковой выдачи Яндекса. С малыми задержками между запросами капча может появиться уже между каждыми 50 и чаще страницами. Если поставить разумные "человеческие" задержки около 8000 мс (8 сек), то сбор без капчи идет больше чем для 700 запросов (эксперимент еще не закончен, но результаты уже очевидны).

ойй =) я тут руками вводил запросы , нужно было почитать инфо =)

интервал был минимум несколько минут .... так все равно .. каждый запрос = вылезиет каптча ...

ВО
На сайте с 20.09.2012
Offline
47
#94

Ооооооо, похоже я тут не один с проблемой капчи. Яшка наверно конкретно прикрутил сбор всего 😂 . А Вы тут о своих 8-10 секундах пишите. Бред полный.

Z
На сайте с 16.06.2012
Offline
57
#95

Работать не возможно

У меня вообще не работает - результатов 0, настройки все перекрутил.

G
На сайте с 19.06.2011
Offline
64
#96
jumic:
с какими доменами google работает кейколлектор??

com.u

com

by

de

us

it

kz

ae

com.tr

ee

lv

lt

co.uk

es

bg

com.do

MyOST
На сайте с 22.01.2006
Offline
559
#97
Виталий Онищенко:
А Вы тут о своих 8-10 секундах пишите. Бред полный.

мы потестировали, выложили информацию для пользователей. Почему же это называется бредом?

Печально. Если наши выкладки не интересны, мы можем их не выкладывать, чтобы не дезинформировать пользователей.

zxgame:
У меня вообще не работает - результатов 0, настройки все перекрутил.

в техподдержку обратиться нужно

Подробнее о том, как это сделать: http://www.key-collector.ru/news/support-how-to-use.php

fanat85, на момент теста, обеденное время, с данными параметрами работа нормально шла. Возможно с увеличением нагрузки на сервисы (к вечеру все вернулись) ситуация с нагрузкой значительно ухудшилась.

Блог (http://seom.info/) | Ты уже SEO профессионал? (http://www.key-collector.ru/) Развиваем семантику более 8 лет! ()
SR
На сайте с 22.02.2010
Offline
77
#98
MyOST:
Печально. Если наши выкладки не интересны, мы можем их не выкладывать, чтобы не дезинформировать пользователей.

У всех нервы на пределе. Не может один унтер-офицер идти в ногу, а вся рота идти не в ногу. Проблемы есть, и они довольно серьезные. Гайки закручены серьезно, большинство читателей этой темы не первый год работают с коллектором и знают, где увеличить задержку и таймаут.

Проблемы с капчей антигейта остались. Вчера про это писал - далеко не все разгаданные капчи ведут к заполнению строк в программе. Монитор выдает русские капчи, Вы вчера анализировали мой лог и обнаружили, что капчи разгадываются в латинице.

Как вариант - может есть смысл больше доменов яндекса прикрутить? Заметил, что с бай и кейзет вроде меньше капчи выдает.

А вообще, за эти несколько дней перепробовал сервисов пять прокси, повбивал руками и повтыкал на "все работники заняты". Слил прилично денег на высокие ставки в антигейте и всякие "элитные" и "супербуперэлитные" прокси. Вывод такой - лучше ХМЛ нет пока ничего. Надо покупать лимиты.

MyOST
На сайте с 22.01.2006
Offline
559
#99

smexoblog.ru, да XML сейчас стабильней в некотором роде, т.к. на выдачу нагрузка большая, отсюда и защитная реакция. Сервисы все забиты, прокси тем более. Речь даже о забитых дорогих вариантах, не говоря о доступных.

G
На сайте с 19.06.2011
Offline
64
#100

Запустил сбор КЕИ в 10 потоком 300 строк собрал ни одной капчи!!!

по ходу яндекс попустило немного :)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий