alukart: а с какой скоростью он добавляет новости?
тоесть сколько он может спарсить страниц за 1 час (+загрузка фоток на свой сервак +накладка на них водяной знак) при условии что у меня есть свой сервак ?
к примеру DLE Grabber Private V9.2 может сграбить за час где то несколько тысяч.
Это зависит от мощности сервера и качества его интернет-соединения. Сами новости будут парситься не медленнее, по поводу парсинга с опциональными функциями (загрузка картинок, наложение водяного знака) сказать не могу.
В настоящий момент перерабатывается ядро скрипта, новая версия будет работать быстрее, правильно считывать большее количество шаблонов, а также читать DLE сайты, на которых отключен ЧПУ. Обновление я планирую закончить в течении недели.
Если хотите взглянуть на демо версию текущей версии - напишите в ICQ или в PM.
Рад сообщить о выходе новой версии. Вот список нововведений:
Улучшен механизм синонимизации текста, в частности, превью и полную часть новости можно синонимизировать разными базами;
Добавлен новый модуль (а также визуальный компонент к нему) для уникализации текста с помощью Google Translate;
Добавлен драйвер для движка LiveStreet;
Добавлен драйвер для движка Joomla;
Добавлен драйвер, сохраняющий новости в текстовые файлы;
Добавлен модуль для тумбирования больших картинок на уровне html-кода;
Добавлен модуль для замены текста (по точным совпадениям или по шаблонам);
Добавлена возможность сохранения списка последних спарсенных сайтов;
Добавлена возможность использования прокси-сервера для парсинга новостей;
Все регулярные выражения, отвечающие за парсинг источника, - вынесены в отдельный конфиг и документированы, благодаря чему данный скрипт можно адаптировать под сайты, ранее не поддерживаемые;*
А также многое другое... В скором времени, цена на скрипт будет увеличина - так что торопитесь : - )
Znamensk: Мануал по установке и так далее нормальный имеется? Я бы купил, но сайтов у меня много.
Да, к дистрибутиву прилагается пошаговый мануал. Все конфиги подробно закомментированы. Если хотите, могу выложить сюда код главного конфигурационного файла.
У меня на сайте стоял какой то граббер но он грабил только с 1 сайта не больше 5-10 новостей а ваш грабер сколько может за раз сграбить новостей?
За раз - сколько угодно:
1) Награбленные новости добавляются в хэш, и, даже, если произошел сбой, - достаточно указать заного весь диапазон страниц, а скрипт сам разберется, что уже скачал, а что осталось
2) Дабы не нагружать сильно сервер, получение и добавление происходит частями, можно указать паузу (полезно, если на сайте-источнике стоит анти-флуд защита)
Кто хочет протестировать демо версию - пишите в PM или в ICQ.
Итак, как и обещал, - выпускаю обновление. Постарался реализовать наиболее интересные предложения,
которые мне поступили)
- Добавлен универсальный конвертор формата текстовых баз синонимов; - добавлена возможность автоматического наложения водяного знака на картинки, если они загружаются на сервер; - добавлена возможность автоматического сохранения картинок в разные папки с сортировкой по дате (годам, месяцам) - добавлена система удаления текстовых совпадений из содержания новости по шаблонам; - добавлена возможность заключения всех ссылок новости в тег <noindex> ... </noindex>; - добавлена возможность автоматического расшифровывания dle ссылок (./engine/go.php) на сайте-источнике; + также множество других нововведений;
Также, хочу еще раз прояснить некоторые моменты:
- Текущая цена граббера 35 wmz;
- Услуга бесплатной установки и настройки граббера действительна ТОЛЬКО для одного сайта.
- Для всех клиентов обновления в течении 6 месяцев - бесплатны!
а с какой скоростью он добавляет новости?
тоесть сколько он может спарсить страниц за 1 час (+загрузка фоток на свой сервак +накладка на них водяной знак) при условии что у меня есть свой сервак ?
к примеру DLE Grabber Private V9.2 может сграбить за час где то несколько тысяч.
Это зависит от мощности сервера и качества его интернет-соединения. Сами новости будут парситься не медленнее, по поводу парсинга с опциональными функциями (загрузка картинок, наложение водяного знака) сказать не могу.
В настоящий момент перерабатывается ядро скрипта, новая версия будет работать быстрее, правильно считывать большее количество шаблонов, а также читать DLE сайты, на которых отключен ЧПУ. Обновление я планирую закончить в течении недели.
Если хотите взглянуть на демо версию текущей версии - напишите в ICQ или в PM.
Принимаем заявки.
Оплата принимается по WebMoney (WMZ/WMR) и Яндекс.Деньги.
Рад сообщить о выходе новой версии. Вот список нововведений:
А также многое другое... В скором времени, цена на скрипт будет увеличина - так что торопитесь : - )
---------------------------------------------------------------------------------------
P.S. Как и прежде, все обновления - бесплатны!
* - техническая поддержка по конфигурации данной библиотеки не предоставляется.
Мануал по установке и так далее нормальный имеется?
Я бы купил, но сайтов у меня много.
Да, к дистрибутиву прилагается пошаговый мануал. Все конфиги подробно закомментированы. Если хотите, могу выложить сюда код главного конфигурационного файла.
За раз - сколько угодно:
1) Награбленные новости добавляются в хэш, и, даже, если произошел сбой, - достаточно указать заного весь диапазон страниц, а скрипт сам разберется, что уже скачал, а что осталось
2) Дабы не нагружать сильно сервер, получение и добавление происходит частями, можно указать паузу (полезно, если на сайте-источнике стоит анти-флуд защита)
Кто хочет протестировать демо версию - пишите в PM или в ICQ.
Итак, как и обещал, - выпускаю обновление. Постарался реализовать наиболее интересные предложения,
которые мне поступили)
- Добавлен универсальный конвертор формата текстовых баз синонимов;
- добавлена возможность автоматического наложения водяного знака на картинки, если они загружаются на сервер;
- добавлена возможность автоматического сохранения картинок в разные папки с сортировкой по дате (годам, месяцам)
- добавлена система удаления текстовых совпадений из содержания новости по шаблонам;
- добавлена возможность заключения всех ссылок новости в тег <noindex> ... </noindex>;
- добавлена возможность автоматического расшифровывания dle ссылок (./engine/go.php) на сайте-источнике;
+ также множество других нововведений;
Также, хочу еще раз прояснить некоторые моменты:
- Текущая цена граббера 35 wmz;
- Услуга бесплатной установки и настройки граббера действительна ТОЛЬКО для одного сайта.
- Для всех клиентов обновления в течении 6 месяцев - бесплатны!
Вышла новая версия.
В связи с большим наплывом вопросов по работе с потоковым видео, опишу возможные варианты работы:
- FLV Flash проигрыватель замещается любым своим (в комплекте с дистрибутивом идет один)
- Сами FLV видео, по желанию, могут закачиваться на сервер. Делать это можно в двух режимах:
---------------------------------------------
Также, я готов продать нескольким людям скрипт по старой цене (25 wmz), при условии написания объективного отзыва о продукте.
Цена граббера увеличивается до 35 wmz.
В новой версии появилась возможность добавлять потоковые видео (IMBd) в нескольких режимах (в том числе и с полной загрузкой FLV-видео)
Тема актуальна. Забавно, но в связи с похолоданиями количество заказов резко возросло :)))
Акция завершена. Зато появилась новая версия.
Добавлены новые компоненты:
- online-синонимизатор (с поддержкой неограниченного количества баз)
- редактор новостей (в визуальном RTE-редакторе или на уровне HTML-кода)
Акция!
До 8.10.2009 - стоимость скрипта всего 20 WMZ.