gogres

Рейтинг
21
Регистрация
28.03.2009

Внимание!!! Только сегодня беспрецендентная акция. За 30$ продаются оба парсера- yahoo и яндекс

Жду всех в аське!!!

bearman:
получил скрипт на проверку, скрипт работает :)

прокси я не добавлял, но уверен что и с ними будет работать. в общем то свою цель делает, удачи в продажах :)

bearman добавил 11.06.2010 в 23:51
автор молодец!

спасибо за проверку.

П.С.: не стесняемся- покупаем :)

вот сделал для теста вэбверсию скрипта

хttp://85.17.188.136/~qwetw32/webparser/webparser.php

парсит один запрос, парсить могут одновременно 10 человек. могут быть сбои в работе данной вэбверсии, так как одновременные запуски идут.

gogres добавил 08.06.2010 в 20:30

пока что парсер парсит только англ. запросы

gogres добавил 09.06.2010 в 15:28

добавил для наглядности вывод на экран общего количества результатов по запросу. это будет удобно для того, чтобы знать какие запросы ещё поделить на подзапросы для максимального парсинга.

gogres добавил 09.06.2010 в 17:43

добавил возможность подстановки или доменных зон или заданных слов из файла или и то и другое сразу. тобишь теперь вам не надо конструировать запрос размешивая его доменными зонами и какими либо словами. теперь можно вставить голый запрос, поставить 2 галки и дальше парсер сгенерит запросы уже сам :)

gogres добавил 09.06.2010 в 17:44

Цена как и говорил повышается. теперь парсер стоит 30$

sashka_:
настаиваешь что бы была версия копия твоей ? =) могу сделать

ну вот давай возьмём 30 запросов и сравним у кого больше напарсится.

gogres добавил 07.06.2010 в 23:28

sashka_:
вот я писал , там без проксей мне лично хватало на 100 запросов. проксю прикрутить 10 мин )
парсер выдачи yahoo

а вообще интересный парсер:

HTTP-шлюз не отвечает (код ошибки: 504)

и это один запрос. так что попрошу не офтопить в моём топике.

gogres добавил 08.06.2010 в 15:31

Добавил возможность парсить Inlinks в siteexplorer`е. Очень удобно теперь можно парсить бэки своих и не только своих сайтов/доров :)

На сегодня цена пока остаётся прежней, спешите! Завтра будет стоить уже дороже!

sashka_:
вот я писал , там без проксей мне лично хватало на 100 запросов. проксю прикрутить 10 мин )
парсер выдачи yahoo

а если запросов 1к? по одному вбивать?

sashka_:
в паблике есть подобное

ниразу не встречал, даже интересно. покажи где.

gogres добавил 07.06.2010 в 18:50

sashka_:
раз ты написал парсер , че нельзя было удалить дубли ?

вот именно, я же написал парсер.

Kyzmit4:
Плохих проксей:)дык ты ж их к своему парсеру оттудва берешь, и хочешь сказать, что твой на хреферовских лучше парсит?:)К сведению, хрефер яху парсит отлично, без каких либо банов

ну давай для сравнения возьмём 10 запросов и попарсим, ты хрефером, а я своим парсером.

Kyzmit4:
Опять же, на финта, ежели все это прекрасно делает тот же хрефер?

тот же хрефер во-первых стоит не 20$, а во-вторых он много результатов теряет при парсинге из-за плохих проксей и банов поисковиков. у меня есть он, но я им не паршу, поэтому решил написать парсер себе, а заодно и другим :)

П.С.: у меня есть практически все платные паблик парсеры, все с лицензией. думаешь я стал бы просто так себе парсер писать?

n1oise:
что мне лично позволило удалять сразу нулевые запросы.

спасибо за мысль. Добавил запись нулевых запросов в отдельный файл, чтоб потом можно было удалить их из базы запросов.

в том что много упускает он

ну и цена не для всех у него

gogres добавил 07.06.2010 в 14:59

Вот небольшой отчёт из парсинга:

Пройдена страница 0 выдачи по запросу "Our users have posted a total" -phpbb.com -phpbb.pl -hacks site:com , собрано 100
Пройдена страница 1 выдачи по запросу "Our users have posted a total" -phpbb.com -phpbb.pl -hacks site:com , собрано 100
Пройдена страница 2 выдачи по запросу "Our users have posted a total" -phpbb.com -phpbb.pl -hacks site:com , собрано 100
Пройдена страница 3 выдачи по запросу "Our users have posted a total" -phpbb.com -phpbb.pl -hacks site:com , собрано 100
Пройдена страница 4 выдачи по запросу "Our users have posted a total" -phpbb.com -phpbb.pl -hacks site:com , собрано 100
Пройдена страница 5 выдачи по запросу "Our users have posted a total" -phpbb.com -phpbb.pl -hacks site:com , собрано 100
Пройдена страница 6 выдачи по запросу "Our users have posted a total" -phpbb.com -phpbb.pl -hacks site:com , собрано 100
Пройдена страница 7 выдачи по запросу "Our users have posted a total" -phpbb.com -phpbb.pl -hacks site:com , собрано 100
Пройдена страница 8 выдачи по запросу "Our users have posted a total" -phpbb.com -phpbb.pl -hacks site:com , собрано 100
Пройдена страница 9 выдачи по запросу "Our users have posted a total" -phpbb.com -phpbb.pl -hacks site:com , собрано 100

gogres добавил 07.06.2010 в 15:17

при средней проксе скорость примерно 3сек на одну страницу выдачи.

Можно отсеивать таймаутом долгие прокси в парсере.

gogres добавил 07.06.2010 в 15:26

дам бесплатно паре человек с нормальной репутацией за отзыв. с этим вопросом в личку

gogres добавил 07.06.2010 в 18:11

С 500 запросов (запрос в принципе один, остальные- подстановки к нему) только что собрал 38к ссылок, это цифра с дублями, как есть в выдаче. причём запросы не очень удачные- многие из 500та отдают менее 100 результатов, а то и 0.

Жду всех в аське :)

Всего: 84