Форум Практика оптимизации Сервисы и программы для работы с SE

Бесплатный парсер вебархива

12
C
На сайте с 18.03.2013
Offline
1
codemuseum
#11

Вышла новая версия парсера! Теперь он упаковывает все что находит в вебархиве в zip. Ссылка на архив будет в конце страницы (когда скрипт отработает). Тестируем, отписываемся о результатах!

P.S. Пришлось поставить скрипт на другой хостинг так как мой не держит set_time_limit(0). Просьба тестировать на небольших сайтах, дабы не грузить хост и не агрить админа :)

Как проверить много ссылок Посоветуйте хостинг, нагрузка 5000 Онлайн Дорген. Beta-версия
TF-Studio
На сайте с 17.08.2010
Offline
334
TF-Studio
#12

Вы бы лучше полноценный парсер сделали бы, у меня что-то все времени на это нету.

Могу дать полное ТЗ. (если интересно, жду в личке)

Вот он - на ура пойдёт.

Чтобы полностью выкачивал весь сайт с картинками.

Всё ещё лучший способ заработка для белых сайтов: GoGetLinks (https://www.gogetlinks.net/?inv=fahbn8).
как выкачать картинки с как повысить вИЦ внутренних Нужен парсер Директа и
C
На сайте с 18.03.2013
Offline
1
codemuseum
#13

Ну так он с картинками, скриптами и всем остальным качает. Осталось проверять на ошибки и чистить вставки кода вебархива. Потом уже можно написать парсер и кэша гугла.

Prior
На сайте с 03.03.2008
Offline
194
Prior
#14

codemuseum, полезное начинание.

После смены вёрстки вебархива бесплатных рабочих скриптов-парсеров не осталось (я по крайней мере не нашел, хотя искал довольно настойчиво).

Надеюсь, доведёте до ума этот скрипт 🍻

Ответы на вопрос - https://answers.net.pl
C
На сайте с 18.03.2013
Offline
1
codemuseum
#15

Prior, Спасибо! Буду стараться! :)

---------- Добавлено 31.03.2013 в 04:20 ----------

Как я и предполагал, исходящий траф был перекрыт, скрипт перенесен сюда, set_time_limit(0) все равно отключен :(

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий