Я на больших объемах не тестил (мах 50 урлов за раз), не было необходимости - и бана не было. Но всё равно, в следующее обновление добавлю работу через TOR.
CHEBURASHKA: Что то я не заметил в программе столбца ЯК или надо полную версию купить чтобы он появился? Также программа понимает только список доменов в txt формате, а в TSV и CSV нет
В этой версии ЯК нет, в разрабатываемой - уже есть. TSV и CSV не поддерживаются.
sly-boots добавил 06.06.2009 в 13:59
CHEBURASHKA: Скажите, по какой формуле идет проверка наличия сайта в ЯК, ведь есть еще скрытая его часть, которая показывается на тулбаре
Пожалуйста :) В ближайшее время выйдет еще одно небольшое обновление.
CHEBURASHKA, отправил
Sonitta, ей и так "цены" нет - 1WMZ :)
Но, может быть и будет... :)
да + чтобы можно было по 5-10 тысяч доменов сразу проверять и программа не зависла при этом
Ок. Сегодня сделаю и проверю пару тысяч :)
Нужны большие объемы, сделайте задержку в программе - вот тогда аналогов не будет проге
вы имеете ввиду настраиваемую задержку между запросами?
всё, уже никому не интересно..? :(
-scream-, что именно нужно парсить?
Появилось свободное время и я кое-что добавил...
как видно по скриншоту, это:
и вывод на печать :)
Я на больших объемах не тестил (мах 50 урлов за раз), не было необходимости - и бана не было. Но всё равно, в следующее обновление добавлю работу через TOR.
Скачать
Как скоро она выйдет. Запрос правильнее проверять:
function yak($url)// определяем наличие в каталоге
{
$str=file_get_contents("http://bar-navig.yandex.ru/u?ver=2&show=32&url=http://$url");
if($str==false){
$yak=0;
}else{
$find=preg_match("/(title)/", $str, $yak);
if ($find==1){
$yak=1;
}else{
$yak=0;
}
}
return $yak;
};
Спасибо, изменю.
Через несколько дней. Меньше недели.
Что то я не заметил в программе столбца ЯК или надо полную версию купить чтобы он появился?
Также программа понимает только список доменов в txt формате, а в TSV и CSV нет
В этой версии ЯК нет, в разрабатываемой - уже есть. TSV и CSV не поддерживаются.
sly-boots добавил 06.06.2009 в 13:59
Скажите, по какой формуле идет проверка наличия сайта в ЯК, ведь есть еще скрытая его часть, которая показывается на тулбаре
поиск по http://search.yaca.yandex.ru/yca/cy/ch/xxx.ru