Парсер прямого эфира Яндекса

12
99th
На сайте с 11.02.2008
Offline
2
2045
l00t.ru - полезная информация и софт для ее добычи (http://l00t.ru).
FH
На сайте с 16.02.2008
Offline
1
#1

99th, извините, а в чем смысл этого парсера?

Ведь база собранных кеев никак не сортируется, как я понял.

99th
На сайте с 11.02.2008
Offline
2
#2
FreeHunter:
99th, извините, а в чем смысл этого парсера?

тупо пиарю свой блог.

Б
На сайте с 07.07.2007
Offline
46
#3

Все бы хорошо, да вот только в виде скрипта бы такое получить, чтобы на сервер поставить, тогда было бы лучше.

dimok
На сайте с 08.11.2002
Offline
291
#4

99th, сколько за сутки собирает?

CLICKBAZA: есть траф - будут и деньги (https://clickbaza.com/)
99th
На сайте с 11.02.2008
Offline
2
#5
Бармалейкин:
Все бы хорошо, да вот только в виде скрипта бы такое получить, чтобы на сервер поставить, тогда было бы лучше.

термин "сервер" не определяет используемую ОС.

dimok:
99th, сколько за сутки собирает?

пауза в запросах настраивается. Без прокси яша не банит с 10 секундами, выходит примерно 20*6*60*24 = 172800 кеев в сутки. Проксифицируете - можно поставить паузу меньше.

dimok
На сайте с 08.11.2002
Offline
291
#6

99th, ясно. у меня примерно 300к в сутки тянется. интересно было сравнить

K
На сайте с 31.01.2001
Offline
737
#7

Это уже лет 6 "кривой эфир", а не прямой. Там лишь часть запросов, собранных за несколько минут предыдущего часа.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
dimok
На сайте с 08.11.2002
Offline
291
#8

Kost, если парсить не один день, то это не так важно ;)

99th
На сайте с 11.02.2008
Offline
2
#9
dimok:
99th, ясно. у меня примерно 300к в сутки тянется. интересно было сравнить

с одного выделенного ип, без задержки между запросами?

Б
На сайте с 07.07.2007
Offline
46
#10
99th:
термин "сервер" не определяет используемую ОС.

Под апач. Неважно Денвер или FreeBSD

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий