CheckParams - массовая проверка параметров доменов и ссылок

Проверил 25 к доменов на ТИЦ за сегодня, проверяет без ошибок, просто на отлично отрабатывает все функции. В толковых руках программа зверь. Желаю автору успехов, программа буквально развязывает руки 😂

Перепробовав на данный момент несколько подобных программ (в том числе и платных), я остановил свой выбор именно на этой.

Я удивлен, что на данный момент программа пользуется небольшой популярностью. Наверное нашему пользователю привычнее "потыкать кнопочки". Но, несмотря на то, что активных юзеров на данный можно пересчитать по пальцам, автор вот уже как пол года продолжает активно развивать программу. А если учесть, что на данный момент программа распространяется бесплатно, то терпению автора можно только позавидовать.

После того, как ТС прикрутил к программе http интерфейс, появилась возможность использовать программу в каких-то персональных программах/скриптах и не бояться за то, что придется каждую неделю подкручивать код из-за того, что яндекс поменял интерфейс...

Таким образом, из всех программ, представленных на данный момент в открытом доступе, эта программа выигрывает во всём.

Желаю автору удачи в дальнейшем развитии программы!

Ух ты.

Как раз нужно проверить 8к доменов на PR и склейку.

mlu, могу я получить ключ?

Ключи все могут получить, это бесплатно. Ключи в данный момент нужны лишь для того, чтобы не допустить неконтролируемое распространение :)

Мучю прогу всего пару дней, но впечатление о ней все лучше и лучше, со временем она совершенно справедливо и обязательно, просто должна (обязана) стать платной :)

Есть пара вопросов и пожелание:

1)

А задержки эти в параметре check_interval= какие ставить? об этом ни намека нигде. Мне надо регулярно пробивать около 6.тыс доменов на количество страниц в индексе яндекса, все остальные параметры чекает прога нормально но по яндексу около половины в итоге имеют статус Yandex Indexed Pages Error = 1 хотя около 2000 свеже-купленных прокси при этом процессе используются.

т.е. есть надо задержку какую то ставить или параметр retries="10" увеличить раза в три, при этом для скорости надо еще с количеством потоков поэксперементировать, как оптимальнее решить то этот проблем?

2)

Непонял, если на локальном компе прога работает то там никаких файлов с проверенными прокси не создается ни в процессе ни после завершения работы, но судя по цитате такие где то быть должны...

то есть если в разделе с источниками прокси <source> прописано значения "good" то чекать эти прокси на работоспособность программа не будет?

3)

Пожелание - скрипт который бы извлекал из данных полученных модулем Whois дату регистрации и окончание регистрации домена...

Задержки каждый ставит свои, подобранные опытным путём :) От задержек напрямую зависит скорость проверки, но так же зависит и "забаниваемость". Поставьте 60 секунд, посмотрите банят ли. Если не банят, поставьте 30 секунд. Если не банят, то 15 сек. Не банят = 7.5, очень быстро так придёте к варианту, который устраивает Вас больше всего :) Еще эта настройка очень зависит от качества прокси, чем приватнее и малозаюзаннее прокси, тем быстрее можно проверять :) Покупные прокси не являются гарантией того, что они не используются еще кем-то.

С яндексом вообще беда, банят прокси повально просто. Советую увеличить кол-во попыток проверить параметр через разные прокси (retries). Еще можно отсеивать забаненные прокси прямо на этапе их проверки, для этого необходимо переписать настройки в теге <check> таким образом, чтобы там вместо гугла использовался яндекс с проверкой на бан.

Ну Вы же сами привели ссылки вида http://127.0.0.1:8888/socks5.txt. Вы пробовали открывать их в браузере во время работы программы? %)

Да, именно так. Она будет сразу считать их рабочими. Это используется, когда 2 программы цепочкой работают. Одна просто всегда запущена и проверяет прокси, а вторая скачивает по вышеприведённой ссылке уже рабочие прокси и проверяет параметры ссылок через прокси.

Попробуйте спросить кого-нить из кодеров на форуме. Скрипт настолько простой, что его 90% за спасибо напишут :)

Вот заглушка на пхп:

<?php



$fp = fopen("results.csv", "r");	



while (!feof($fp))

{

	list($domain, $error, $whois) = explode(";", fgets($fp), 3);

	if ($error)

		continue;



	$whois = base64_decode($whois);

	

	// тут надо выдернуть из раскодированных данных нужные поля и скинуть их в файл

}



fclose($fp);



?>

Да, хорошая идея должно сработать, только у меня представления о работе прокси не то что поверхностные - нулевые...

Подскажите на что например можно заменить

И еще любопытно, если в процессе работы программы через прокси эти прокси (рабочие) закончились, что программа будет делать? проверять без прокси? ждать когда прокси разбанятся? или просто остановится?

Отвечу в лс/аську 8)

Программа не остановится и не будет проверять напрямую, она просто будет ждать, пока появятся рабочие прокси :) Ведь она их периодически скачивает, вдруг что новое рабочее появится. Плюс самому можно залить прокси через HTTP-запрос, на пхп примеры есть в директории examples

Тестировал прогу несколько дней, результатами остался очень доволен. Особо радует скорость работы и простота настроек. Автор до воли адекватен и приятен в общении, все терпеливо показал и рассказал. Рекомендую!!!

Единственный недостаток программы отсутствие удобного гуи, а так свои функции выполняет на все 100%.