Sergey Gr.

Sergey Gr.
Рейтинг
48
Регистрация
21.10.2008
alukart:
а с какой скоростью он добавляет новости?
тоесть сколько он может спарсить страниц за 1 час (+загрузка фоток на свой сервак +накладка на них водяной знак) при условии что у меня есть свой сервак ?

к примеру DLE Grabber Private V9.2 может сграбить за час где то несколько тысяч.

Это зависит от мощности сервера и качества его интернет-соединения. Сами новости будут парситься не медленнее, по поводу парсинга с опциональными функциями (загрузка картинок, наложение водяного знака) сказать не могу.

В настоящий момент перерабатывается ядро скрипта, новая версия будет работать быстрее, правильно считывать большее количество шаблонов, а также читать DLE сайты, на которых отключен ЧПУ. Обновление я планирую закончить в течении недели.

Если хотите взглянуть на демо версию текущей версии - напишите в ICQ или в PM.

Принимаем заявки.

Оплата принимается по WebMoney (WMZ/WMR) и Яндекс.Деньги.

Рад сообщить о выходе новой версии. Вот список нововведений:

  • Улучшен механизм синонимизации текста, в частности, превью и полную часть новости можно синонимизировать разными базами;
  • Добавлен новый модуль (а также визуальный компонент к нему) для уникализации текста с помощью Google Translate;
  • Добавлен драйвер для движка LiveStreet;
  • Добавлен драйвер для движка Joomla;
  • Добавлен драйвер, сохраняющий новости в текстовые файлы;
  • Добавлен модуль для тумбирования больших картинок на уровне html-кода;
  • Добавлен модуль для замены текста (по точным совпадениям или по шаблонам);
  • Добавлена возможность сохранения списка последних спарсенных сайтов;
  • Добавлена возможность использования прокси-сервера для парсинга новостей;
  • Все регулярные выражения, отвечающие за парсинг источника, - вынесены в отдельный конфиг и документированы, благодаря чему данный скрипт можно адаптировать под сайты, ранее не поддерживаемые;*

А также многое другое... В скором времени, цена на скрипт будет увеличина - так что торопитесь : - )

---------------------------------------------------------------------------------------

P.S. Как и прежде, все обновления - бесплатны!

* - техническая поддержка по конфигурации данной библиотеки не предоставляется.

Znamensk:
Мануал по установке и так далее нормальный имеется?
Я бы купил, но сайтов у меня много.

Да, к дистрибутиву прилагается пошаговый мануал. Все конфиги подробно закомментированы. Если хотите, могу выложить сюда код главного конфигурационного файла.

У меня на сайте стоял какой то граббер но он грабил только с 1 сайта не больше 5-10 новостей а ваш грабер сколько может за раз сграбить новостей?

За раз - сколько угодно:

1) Награбленные новости добавляются в хэш, и, даже, если произошел сбой, - достаточно указать заного весь диапазон страниц, а скрипт сам разберется, что уже скачал, а что осталось

2) Дабы не нагружать сильно сервер, получение и добавление происходит частями, можно указать паузу (полезно, если на сайте-источнике стоит анти-флуд защита)

Кто хочет протестировать демо версию - пишите в PM или в ICQ.

Итак, как и обещал, - выпускаю обновление. Постарался реализовать наиболее интересные предложения,

которые мне поступили)


- Добавлен универсальный конвертор формата текстовых баз синонимов;
- добавлена возможность автоматического наложения водяного знака на картинки, если они загружаются на сервер;
- добавлена возможность автоматического сохранения картинок в разные папки с сортировкой по дате (годам, месяцам)
- добавлена система удаления текстовых совпадений из содержания новости по шаблонам;
- добавлена возможность заключения всех ссылок новости в тег <noindex> ... </noindex>;
- добавлена возможность автоматического расшифровывания dle ссылок (./engine/go.php) на сайте-источнике;
+ также множество других нововведений;

Также, хочу еще раз прояснить некоторые моменты:

- Текущая цена граббера 35 wmz;

- Услуга бесплатной установки и настройки граббера действительна ТОЛЬКО для одного сайта.

- Для всех клиентов обновления в течении 6 месяцев - бесплатны!

Вышла новая версия.

В связи с большим наплывом вопросов по работе с потоковым видео, опишу возможные варианты работы:

- FLV Flash проигрыватель замещается любым своим (в комплекте с дистрибутивом идет один)

- Сами FLV видео, по желанию, могут закачиваться на сервер. Делать это можно в двух режимах:

  • Автоматический: все видео закачивается скриптом через cURL;
  • Ручной: в конце парсинга страниц выводится список ссылок на видео, которое необходимо скачать и залить на сервер вручную;

---------------------------------------------

Также, я готов продать нескольким людям скрипт по старой цене (25 wmz), при условии написания объективного отзыва о продукте.

Цена граббера увеличивается до 35 wmz.

В новой версии появилась возможность добавлять потоковые видео (IMBd) в нескольких режимах (в том числе и с полной загрузкой FLV-видео)

Тема актуальна. Забавно, но в связи с похолоданиями количество заказов резко возросло :)))

Акция завершена. Зато появилась новая версия.

Добавлены новые компоненты:

- online-синонимизатор (с поддержкой неограниченного количества баз)

- редактор новостей (в визуальном RTE-редакторе или на уровне HTML-кода)

Акция!

До 8.10.2009 - стоимость скрипта всего 20 WMZ.

Всего: 123