Написал свой первый граббер...

Можно сделать. КУРЛ, сокеты - в гугл! Ну лучше для начала с сокетами попробуйте, чтобы понять как оно работает, а потом уже курл можно.

КУРЛ это вообще библиотека, которая использует сокеты, если не ошибаюсь.

Как вариант, wget тянет страницу (кстати, умеет авторизироваться), ну а далее открываете файл как ресурс.

А ещё программы, не требующие веб интерфейса, лучше запускать напрямую в шелле. Скорость вырастет и сервер не будет напрягаться.

Настоятельно рекомендую посмотреть в сторону SimpleHTMLDom (simplehtmldom.sourceforge.net), ибо сам раньше допускал такую ошибку - парсил html-документы регулярками.

А если на странице более X00 ссылок, не сдохнет CURL-то?

DOMXPath уже отменили?

Здесь дело вкуса. DOMXPath работает с XPath-синтаксисом, simpleHtmlDom - с нативным css-синтаксисом. Кому что удобнее.

Если есть сравнительный тест в пользу первого - то возьму свои слова обратно и буду продвигать в массы его.

я тут 5-ый день php изучаю)))

заинтересовала задачка, но так как кода Alkoshenko совсем не понял, то решил все писать по-своему)

работает тоже долго, наверно минут 3-5, вот что получилось.

<?
$text = file_get_contents('http://www.gistoryja.ru/sitemap.xml');
preg_match_all("/<loc>.*.<\/loc>/", $text, $massiv);
// echo count($massiv[0])."<br>";
	$file = fopen("text.txt","w+");
		for ($index=0; $index < count($massiv[0]); $index++) // echo $massiv[0][$index]."<br>"
			{
			fwrite($file, strip_tags($massiv[0][$index]));
			fwrite($file, "\n");
			}
		;
	fclose($file);
	
####################################
	
$filetext = file('text.txt');
$file = fopen("url.txt","w+");
for ($indexurls=0; $indexurls < count($filetext); $indexurls++)
	{
	echo $filetext[$indexurls]."<br>";
	$texthttp = file_get_contents(trim($filetext[$indexurls]));
	preg_match("/<h1>.*.<\/h1>/", $texthttp, $h1);
	if ($h1[0]!="")
	{
	fwrite($file, strip_tags($h1[0]));
	fwrite($file, "\n");	
	}
	};
fclose($file);
?>

еще регулярки учил весь день

в теме что-то говорилось о curl, надо будет поглядеть как там дела обстоят.

не понимаю почему появляются какие-то звездочки.

:)

Да пусть лучше скрипт подтормаживает немного чем схватить бан по айпи за ДДОС :)

furnaslives, а мне твой не очень понятен )))

но, главное чтобы работало ;)

Я вчера работу с почтой изучал, тоже прикольная вещь, сделал себе формочку "обратная связь" :)

потом у друга взял мыло и через цикл заспамил друга почту)) только скорость не очень была, всего за 300 сек где-то 44письма приходит :( я думал ему 100500 писем придёт)

Эт с чего Вы взяли товарищ?:)

Да и к тому же такими темпами Ваш почтовый сервер может попасть в бан-лист(черный список или как-то еще) к серверу получателю.