Rishpik

Рейтинг
218
Регистрация
23.11.2007
Boris A Dolgov:
vpsland.com? :)

нужна российская контора

KosoyRoman:
Ребята, ну вы чего, я прошу дешевый ))
наше пока тут http://www.serverpronto.com/starternew.php
Но может еще кто дешевле знает?

за 10 баксов дедик чтоли хотите? сами то подумайте... кто за 10 баксов эту коробку в сеть втыкать то хоть будет 😂

steephost:
Виндовый сервер выделенный.
Винда стандарт.
Установка 2-3 часа.

* Pentium Dual Core E2180 (2x2.0GHz)
* 320GB SATA HDD
* 1GB RAM
* IP Addresses: 5
* Bandwidth: 1000GB

Установка 0wmz
В месяц 100wmz

на Украине не надо.

от людей... которые не умеют читать тоже не надо.... потом замучаешься к саппорту такому обращаться 😂

ТС барыга?

neolord:
Смысл проверять их круглосуточно? Они же до дня оплачены, раз в 12 часов это максимум.
1) Мой вариант - делать это скриптом под уникс по крону (хотя не обязательно, см. дальше). 3000 доменов это семечки, прокси даже не нужны.
2) можно
3) Неизвестно, но существует много сайтов где можно проверять whois домена. Я знаю например 12, а их намного больше.
5) не знаю
4)
Я бы сделал так (чтобы не геммороится с проксями). Покупается VPS под виндой (желательно 2008, но не принципиально). К нему приделывается N айпи (ну 10 наверное хватит на всю жизнь). Почему под виндой - работа с внешними айпи под виндус делается просто привязкой к интерфейсу, это очень просто и нет зависимости от типа/работоспособности прокси. Имеется список серверов для проверки whois. Раз в сутки в базу/файл генерируется список запросов в виде связки {домен, сервис проверки, используемый айпи}, с приоритетом по айпи.
Т.е. сначала с одного айпи опрашиваются все сервисы по очереди, потом айпи меняется на следующий и снова все сервисы, и так до конца, потом айпи меняется на предыдущий.
Сами запросы выполняются скриптом, который запускается например каждые 3 часа, он делает эти запросы пока все айпи не получат бан и выключается. При следующем запуске пропускает все домены, на которые есть информация. И работает круглосуточно. Предполагается, что бан на айпи действует 3 часа. Если больше - увеличиваем интервал. При бане главное не как много запросов, а как часто они делаются, как правило так.

Почему Win2008 - там на веб-сервере уже стоит PHP и cURL, легче найти исполнителя. Иначе придется ставить Wamp / Denwer или вручную апач поднимать, что на винде не всегда благополучно выходит, при условии доступа извне.

У меня таким образом работает парсилка позиций с яши, гоши и рамблера. около 20000 запросов в сутки на каждый из серверов делается без проблем, с 10 айпи.

А реализовывать это - день работы толковому прогеру.

По ресурсам - WinVPS с 10 айпи это где то пусть 1000-1500 в месяц, работы прогера ну хз, немного в общем.

спасибо за развернутый ответ... но это все теряет свою актуальность.... если использовать продукт.... ссылка на который была дана в этом топике. согласны? Если прокси поднимать на своем впс то проблем впрнципе не должно быть.

Rishpik добавил 25.01.2009 в 18:59

вашу схему недополнел :) как это с 10 можно проверить? бана не будет?

Rishpik добавил 25.01.2009 в 19:00

neolord:
Смысл проверять их круглосуточно? Они же до дня оплачены, раз в 12 часов это максимум.

всмысле? после 12 по мск освобождаются комы и неты?

rasiell:
Еще добавлю, что если программа не получает удовлетворительный ответ от прокси, то она берет следующий по списку и так до тех пор пока не получит удовлетворяющий ответ или не закончится список прокси

rasiell добавил 25.01.2009 в 17:54


Если 100 прокси, то можно вообще задержку на 0 поставить

а почему? есть ведь наверняка какие-то ограничения проверок с 1 айпи? А я буду проверять может по 10-20к доменов без остановок.

Rishpik добавил 25.01.2009 в 17:59

да и для скольких потоков 100 проксей будет номально.

BadBoy:

Чем больше потоков, тем больше надо ставить задержку.
В день можно пользоваться сколько угодно, но соблюдая правила прокси и задержек, если у Вас статический ip, то буте внимательны с настройками.

это для одного айпа? так?

если у меня 100 проксей... то можно 5 сек поставить и крутить целыми днями?

Rishpik добавил 25.01.2009 в 17:52

то есть работает 100 потоков. На 100 айпи. И между сменами доменов по 5 с задержки?

temniy:
1й вариант - /ru/forum/309330

спасибо. знаю прогу. сейчас пробую.

Rishpik добавил 25.01.2009 в 17:39

P.S. буду рад.... если кто ответит на все вопросы разом :)

Прежде всего хочу поблагодарить автора программы и программиста за хорошую работу. Спасибо. Очеень полезная штука.

если можно вопрос:

В программе есть фподдержка прокси и можно указать количество потоков. задержку.

Если я правильно понял то:

Если выставить 5 проксей и заддрежку в 5 сек мы увидим слующее:

домен1.ру (работает прокси 1)

домен2.ру(работает прокси 2)

домен3.ру(работает прокси 3)

домен4.ру(работает прокси 4)

домен5.ру(работает прокси 5)

домен6.ру(работает прокси 1...... но ждет псле первого домена 5 сек)

домен7.ру(работает прокси 2...... но ждет псле первого домена 5 сек)

домен8.ру(работает прокси 3...... но ждет псле первого домена 5 сек)

домен9.ру(работает прокси 4...... но ждет псле первого домена 5 сек)

домен10.ру(работает прокси 5...... но ждет псле первого домена 5 сек)

Я все правильно понял?

Rishpik добавил 25.01.2009 в 17:37

И какие огарничения на проверку с одного айпи для проверки доменов в зоне com. net. org?

Rishpik добавил 25.01.2009 в 17:37

то есть какие задержки нужно выставлять и чколько раз в день всего с одного можно проверить.

letsgo:
ага :)
а если он на это бабло купить РГД-5 и взорвет какой-нибудь макдональдс к чертям, будете потом в суде доказывать, что Вы террориста не финансировали, а кредиты на форуме выдавали :) :) Присяжных посмешите зато :)

бред какой-то несете.

можно сказать он вам прям так и скажет..... что макдак идет сносить

Всего: 3290