- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ
Экспертная оценка Адмитад
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Решил тут в свободное от работы время размяться и написал быстренько граббер.
Но хотелось бы оттестировать все ньюансы, и сделать нормальный (возможно, коммерческий) продукт.
Поэтому с радостью выслушаю:
- пожелания по функционалу.
- пожелания по стоимости и условиям личензирования.
- возьму несколько средних сайтов для тестирования граббера. бесплатно. будет плюсом, если сможете сравнить результат с работой какого-то другого граббера.
- пожелания по стоимости и условиям личензирования.
Стоимость 0$, желательно на QT и кроссплотформенно, с иходниками на code.google.com, заранее спасибо, и скажите когда выложите примерно.
Стоимость 0$, желательно на QT и кроссплотформенно, с иходниками на code.google.com, заранее спасибо, и скажите когда выложите примерно.
Прошу заметить, я о языке программирования не спрашивал :)
На чем напишу - на том и будут кушать.
***************
1.Сохранение всяких "хитрых" урлов со спец-символами через ModRewrite
2.Перелинковка
3.Авто удаления/добавления определенного кода в тело страницы
4.Импорт сайта в файлы импорта для двигов
5.Чистка кода
6.Возможность удаление внешних ссылок,счетчиков и т.д.
7.Поиск недостающих страниц с других дат
8.Карта сайта
9.Выбор даты
10.Замена недостающих картинок на новые по теме сайта :)
11.Сохранение статей с выкаченного сайта в пдф со вставкой своих ссылок :)
2.Перелинковка
подробнее пожалуйста.
4.Импорт сайта в файлы импорта для двигов
ну это уже задача для граберов сайтов на конкретных двигах.
полностью самодостаточный функционал.
10.Замена недостающих картинок на новые по теме сайта
Приму в дар алгоритм определения темы сайта :)
11.Сохранение статей с выкаченного сайта в пдф со вставкой своих ссылок
чем больше пунктов, не относящихся к граббингу - тем дольше ждать качественного результата.
предлагаю не распыляться на универсальный комбайн.
ПС. Напоминаю: давайте сайты - выкачаю нахаляву.
dkameleon добавил 19.10.2011 в 18:52
9.Выбор даты
Кстати, я заметил, что даты снапшотов - это только точки входа, на самом деле существуют файлы в архиве на датах, которые в спике снапшотов не числятся.
dkameleon добавил 20.10.2011 в 03:29
Вот так он сейчас работает:
подробнее пожалуйста.
Выводить список урлов, которые не получилось загрузить (страницы, картинки и т.д)
С возможностью их замены.
полностью самодостаточный функционал.
Да ладно, думаю не кому не помешает возможность заливать на блоггер к примеру..
Заточка под фрихосты с поддержкой своих доменных имен, под саты как пример.
Не составит труда вести самому тематику, затем напарсить что-то в этом роде
предлагаю не распыляться на универсальный комбайн.
Зато в итоге все будет проще и зачем придумали микроволновку, когда есть печка :)
Всё же повторю просьбу, что уже прозвучала. Возможность импорта в двиги. Если не по профилю¸ то хотя бы складирование данных в CSV/XML.
Кроссплатформенно, это да. Сейчас почти всё время только под Юниксом.
Да ладно, думаю не кому не помешает возможность заливать на блоггер к примеру..
Заточка под фрихосты с поддержкой своих доменных имен, под саты как пример.
конечно не помешает :)
заодно и уникализация текста не помешает, если вдруг окажется не уникальным,
но это уже комбайн, а не граббер :)
я все же нацелен на конкретную задачу.
Возможность импорта в двиги.
Ребят, ну ведь это НЕ граббер уже будет :)
Ой, фе, это очередная пхпэ поделка для быстрого срыва денег на котлеты, не зачет.
Коммерческая версия успехом пользоваться не будет, лучше уж Warrick(только не надо говорить что он не работает - 30-40 минут на изменения пару строк и о чудо он опять в строю).
РаСо, ваша позиция на счет бесплатно, на предпочитаемых вами технологиях, конфетку, да ещё и станцевать - была понятна с первого сообщения :)