пакетный парсер ссылок

Вообщем, как-то так :)

Писал со смарта оО

<?



$file = file('list.txt');  // массив строк-урлов

$find = 'new';  // что ищем

$mask ='#(http:\/\/[a-z0-9\.\-]+\/.*' . $find . '.*)#i';  // шаблон для регулярки

$newfile = 'new.txt';

$newstr = '';





foreach ($file AS $line) {

$line = trim($line);

$page = file_get_contents($line);



preg_match_all($mask, $page, $m);



if (sizeof($m) > 0) {

foreach ($m AS $l) {

 $newstr .= $l[1] . PHP_EOL;

}



}



} 



file_put_contents($newfile, $newstr);



?>

Progr@mmer\. добавил 10.11.2008 в 11:31

Ыыы :) Счас заметил, что он спарсит всю страницу целиком %)

Редактируйте регулярку Ыыы

Спасибо, все работает.

Только под разные нужды регулярку править )

если есть какие-нить идеи, что можно в парсер добавить (мало ли функции нужные), то пиши :)

например по сортировке, чтобы потом он из всех ссылок уже в другой файл выбрал по одной (первой например) с каждого домена )

Improvis добавил 10.11.2008 в 21:14

Кстати, а от чего зависит?

Я парсю например какой-то урл и он потом в файл записал только один уникальный нужный мне урл со страницы, хотя там есть еще три штуки один в один только цифрой отличается, то есть получается он как нашел сразуже отключается ?

PS: Добавляет, который самый верхний