CheckParams - массовая проверка параметров доменов и ссылок

Рад, что удалось "изжить" некоторые вопросы, которые очень беспокоили пользователей :)

Тут появился простенький сервис с историей некоторых параметров доменов:

http://domains.checkparams.com/

Примеры использования:

http://domains.checkparams.com/index.php?q=google.ru

http://domains.checkparams.com/index.php?q=ns1.google.com

Есть как прямой поиск по домену, так и обратный (по ns-серверам, по айпи, по мейл-серверам и т.д.).

Сервис был написан совершенно случайно, не преследует каких-либо целей (монетизация и т.д.) и так же внезапно может исчезть или трансформироваться в нечто иное :)

Друзья, для CheckParams вышло второе бесплатное дополнение с открытым исходным кодом - парсер поисковой выдачи Google.

По набору входящих запросов (возможна автоматическая генерация из двух файлов) производится парсинг поисковой выдачи Google (100 результатов на страницу, все возможности CheckParams по многопоточности и работе с прокси), и запись результатов (ссылки) в файл.

http://checkparams.com/ru/node/168

люди помогите настроить работу с прокси. а то при проверки 30000 страниц на пр после 2000 банить начинает. а у самого у меня не получается. за консультацию заплачу в пределах разумного.

спасибо

densk, Вы читали то, написано по этой ссылке http://checkparams.com/howto-proxies ?

Если да, и не получилось настроить - обращайтесь по координатам, указанным в первом посте, всё бесплатно :)

да спасибо разобрался. нужно было внимательнее читать

еще вопрос кто какие прокси использует. подскажите базы нормальные

спасибо

Боюсь, что многие пользователи не захотят делиться проксями, ибо чем больше пользуются одними и теми же прокси, тем больше банят и тем меньше скорость.

Попробуйте погуглить на тему прокси, в программу можно вставить любое количество ссылок на списки прокси, она сама всё проверит, найдёт рабочие и определит их тип. Только не вставляйте ссылки, которые не обновляются регулярно, ибо там не будет рабочих 100%.

по прокси - посмотрите awmproxy.com, мы с ними работаем. недешево, но и качество соответствующее.

Друзья, обновился парсер выдачи Google. Подробности - здесь.

Здравствуйте, появился бесплатный парсер гугла в виде скриптов к CheckParams, всё настраивается мышкой в через графический интерфейс, никаких XML-файлов и прочего :)

Может быть кому-то будет интересно:

/ru/forum/658844

Друзья, для CheckParams вышла первая версия парсера веб-архива (web.archive.org). Подробности - здесь.