Скрипт зеркалирующий сайты - есть в продаже или писать самому?

WhiteKrol
На сайте с 08.05.2012
Offline
38
511

Требуется скрипт который будет создавать полную копию сайта (по аналогии с программой Teleport) с:

  • Сохранением всех изображений, CSS, JS, файлов для скачивания.
  • Сохранять исходные адреса страниц и в случае если на сайте динамика (index.php?id=22) генерировать .htaccess с правилами mod_rewrite.
  • Работать мультипоточно, желательно на PHP, желательно упаковывая результат в архив.

Уже есть такие или придется писать самому?

forest25
На сайте с 12.09.2009
Offline
67
#1

нужен аналог archive.org? =)

http://www.httrack.com/page/2/en/index.html, либо же wget

Теоретически можно либо портировать/написать утилиту и запускать через CGI-интерфейс, либо же вообще вызывать system('команда') утилиту для зеркалирования.

VPS 512MB 20GB SSD KVM - 5$ (http://u.hmdw.me/digitalocean) | ИМХО о хостингах (http://u.hmdw.me/hosting)
A
На сайте с 12.05.2004
Offline
176
#2

Воровать нехорошо 🙅

WhiteKrol
На сайте с 08.05.2012
Offline
38
#3
forest25:
нужен аналог archive.org? =)

Фактически - да :)

forest25:

http://www.httrack.com/page/2/en/index.html, либо же wget

Теоретически можно либо портировать/написать утилиту и запускать через CGI-интерфейс, либо же вообще вызывать system('команда') утилиту для зеркалирования.

В принципе HTTrack можно попробовать под linux'ом запускать и консоли, пожалуй стоит присмотреться.

Спасибо за ответ!

---------- Добавлено 21.10.2012 в 13:06 ----------

alexseo:
Воровать нехорошо 🙅

Для начала могли бы уточнить цели использования, прежде чем делать выводы о воровстве!

Данный скрипт будет использоваться для создания альтернативного веб-архива коммерческих сайтов, которые по разным причинам потеряли свои файлы не заплатив за хостинг или не сделав бэкапы.

Нямкин
На сайте с 02.12.2010
Offline
65
#4
WhiteKrol:

Для начала могли бы уточнить цели использования, прежде чем делать выводы о воровстве!

Данный скрипт будет использоваться для создания альтернативного веб-архива коммерческих сайтов, которые по разным причинам потеряли свои файлы не заплатив за хостинг или не сделав бэкапы.

Чтоб было что потом на дропы повесить. Это благородная цель, да.

WhiteKrol
На сайте с 08.05.2012
Offline
38
#5
Нямкин:
Чтоб было что потом на дропы повесить. Это благородная цель, да.

Дропы в данном случае - крайняя ситуация, если до окончания срока регистрации владелец не отреагировал на письма с предложением продлить домен и восстановить сайт.

Прибыльность от этих дропов выходит весьма сомнительная, по сравнению с услугой восстановления сайта.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий