forest25

forest25
Рейтинг
67
Регистрация
12.09.2009
Должность
Colary

Привет! С недавних пор eomy.net начал предоставлять услугу vps на ssd.

Пользуюсь их услугами, проблем пока не возникло. Правда у меня не на SSD сервер.

нужен аналог archive.org? =)

http://www.httrack.com/page/2/en/index.html, либо же wget

Теоретически можно либо портировать/написать утилиту и запускать через CGI-интерфейс, либо же вообще вызывать system('команда') утилиту для зеркалирования.

В плане программинга - математика очень нужная штука для настоящего программиста. Сейчас жалею что не уделял должного внимания матану в свое время.

ИМХО прогер без знания математики - это обыкновенный велосипедостроитель-кодер.

УчаснеГ:
Так и должно быть, загляните в каталог через полчасика, там появятся все файлы после полной распаковки архива.

У меня на VPS данный архив распаковывается за пару секунд. То что архив распаковывается так долго что php-скрипт успевает отвалиться по тайм-ауту ни о чем хорошем не говорит. Если уж ресурсов не так много, то может хотя бы тайм-ауты увеличить стоит?

Не хотел бы вас огорчать, но.. при попытке распаковать средствами ISPmanager архив дистрибутива Битрикс Малый Бизнес (63,5 Мб tar.gz) сервер показал мне фигу (NGINX Gateway Timeout). Я конечно понимаю что это довольно таки монстроузный дистр с тысячами файлов, но невозможность распаковки такого архива как то не вяжется с образом безлимитного хостинга.

euhenio:
вк, конечно, попозже будет отложено...
прямые ссылки на фотографии из альбома?

Да, то есть к примеру натравливаем парсер на url альбома, а скрипт выдергивает прямые ссылки на оригиналы. Там уже можно будет их wget'у скормить.

euhenio:
Спасибо bukachuk, благодаря ему, кажется, все решилось, работает без ошибок.
респекты и уважухи )
плз проверьте у кого как

теперь вопрос - кому что нужно парсить? :)

С вк хотелось бы спарсить прямые линки на фотоальбом группы.

- Можно извратиться вытащив из полученной страницы Javascript и попытаться его спарсить и выполнить на php (из разряда фантастики)

- А можно попробовать запустить консольный браузер Links (слабо, но поддерживает javascript) из php (тоже какой-то бред на мой взгляд, но что-то похожее)

Что же это за onclick такой странный? Неужто нельзя посмотреть логи запросов которые исполняются при onclick и просто их отправлять при помощи того же file_get_contents? Проблем с отдачей куки и подменой user-agent нету, потому можно делать довольно сложные запросы.

Ну можно и глубже разобраться в коде найдя участок где непосредственно происходит вставка.

Также можно попробовать поиск зарядить поиск по содержимому на вхождение url которые вставляются. Под винду неплохо работает поиск встроенный в notepad++, в никсах grep

Можно попытаться перехитрить вшивателей ссылок. Можно не удалять код отображающий ссылки а поместить их в буфер вывода php (который вполне можно обнулить).

http://php.su/functions/?ob-start дальше думаю разберетесь, понадобится еще ob_end_clean

Всего: 372