Насколько долго это выполняется

зависеть тут будет не от размера массива, а от скорости соединения вашего сервера с интернетом + скорости генерации страниц движками которые вы будете "парсить" ... а не то что 100 элементов в массиве будет :-D

Об этом я примерно догадывался. Но решение можно применить? Или кто-нибудь применял подобного рода?

а вы решение предлагали?

В принципе думаю обойти эту задачу. Заносить в базу УРЛ. И если у УРЛ нет заголовка, то считывать его. Думаю это скорость увеличит в дальнейшем.

если база статична то да :)

$file = file_get_contents("http://site.ru");

preg_match("#<title>(.*?)</title>#is", $file, $title);

echo $title[1];

Здесь выложил код /ru/forum/comment/5041862

Сделайте его для себя как вам надобно.

Спасибо, про кодировку я как-то и не подумал.

Еще хотел спросить. А если допустим сайт не доступен. Или домен уже не существует. Насколько долго он конектится?

Делайте проверку на ответ сервера

curl как мне кажется очень удобно юзать в этом случае.

К стати там же выложен скрипт проверки фреймов его можете применить для себя.

там скрипт лезет на сайт ищет фреймы и выводит в браузер.

Достаточно заменить в нем регулярку на ту что в послежнем моем скрипте

и будет работать. Только про лучше сделать через курл.

Если сайт будет не доступен или его не будет существовать то скрипты выдаст ошибку..

Подавить ошибку можно так

в скрипт в после <?php

вставить строку

error_reporting(0);

up

потерто

В данном случае можно немного сэкономить на времени выполнения, если сайты которые вы парсите делал не маньяк какой нибудь. Титл обычно содержится в первом килобайте кода, поэтому можно не целиком страницу грузить а нужное количество байт через fopen/fgetc

Если предположить что сайты делал нормальный человек, то можно вообще строками тягать пока не встретится титл. Время ожидания ответа от сервера это не поможет сократить, зато объем передаваемых данных может заметно уменьшиться.

Единственное, что в этом случае вас ограничивает, - это max_execution_time пыхи. Можно тягать порциями с обратным вызовом через аякс/auto-refresh

Хотя вообще все это можно сделать на яваскрипте (если работа разовая). Грузить нужный документ во фрейм и оттуда тягать титл через DOM

neolord добавил 19.06.2009 в 11:27

Если вы будете пользоваться curl, там можно задать время ожидания.

Если стандартные функции работы с файлами, то выбирается наименьшая из соответствующих настроек php/apache.

Можно для начала проверять доступность сайта например через get_headers, но тогда затраты на ожидание ответа удваиваются