Параллельная загрузка в php

http://www.php.net/manual/en/function.curl-multi-init.php

Там с примером

<?php
// create both cURL resources
$ch1 = curl_init();
$ch2 = curl_init();

// set URL and other appropriate options
curl_setopt($ch1, CURLOPT_URL, "http://www.example.com/");
curl_setopt($ch1, CURLOPT_HEADER, 0);
curl_setopt($ch2, CURLOPT_URL, "http://www.php.net/");
curl_setopt($ch2, CURLOPT_HEADER, 0);

//create the multiple cURL handle
$mh = curl_multi_init();

//add the two handles
curl_multi_add_handle($mh,$ch1);
curl_multi_add_handle($mh,$ch2);

$running=null;
//execute the handles
do {
    curl_multi_exec($mh,$running);
} while ($running > 0);

//close the handles
curl_multi_remove_handle($mh, $ch1);
curl_multi_remove_handle($mh, $ch2);
curl_multi_close($mh);

?>

Вы считаете, что параллельная загрузка взамен последовательной что-то ускорит?

ускорит. Общий процесс.

При широком канале скорость отработки скрипта параллельной загрузки с нескольких мест будет ограничена либо отработкой загрузки с самого медленного хоста, либо таймаутом (смотря что раньше наступит).

Да, канал широкий, часть его простаивает. Параллельная загрузка немного, но займёт эту свободную часть тем самым время загрузки будет = максимальному времени загрузки одного из загружаемых сайтов, а не сумме времени загрузки каждого сайта.

booch добавил 10.02.2009 в 18:42

Спасибо, буду пробовать.

booch добавил 10.02.2009 в 18:45

А есть какой-нибудь вариант, чтобы можно было разделить куда записывать результаты? Т.е. первый сайт в $x1, второй в $x2 и так далее. В мультикурле не получается так сделать. А если писать всё в одну, то проблемно определить где чей код начинается.

Есть функция curl_getinfo. Не знаю, работает ли она с мультикурлом. Если нет, то как вариант брать вместе с заголовками и оттуда уже получать откуда что загружено

http://phpdude.ru/archives/318

читай, используй и учись. тебе поможет я думаю. не за что.

велосипед с баянным приводом.

посмотрите как пишут профи http://code.google.com/p/multicurl-library/