vl12

Рейтинг
55
Регистрация
08.05.2012
IPXI:


vl12, а можете показать в каком формате это выглядит в соц.сетях?

---

Каюсь, даже при установленных 2 виджетах на своем интернет магазине выгружать в свои группы что-либо я так и не стал) Но я думаю это выгрузка в альбомы типа такого https://vk.com/albums-38455341 Видите 200 тыс фото в альбоме с параметрами. Думаю это как раз этими парсерами сделано.

http://opt.fpeople-store.ru Вот не мой магазин - на сайте установлено 2 виджета 2х разных парсеров. Можно через любой выгрузить себе в соц сеть если интересно.

borisd:
UmbrellaCoders, как я и полагал, кроме словесного поноса конкретики от вас не будет.

---------- Добавлено 11.06.2018 в 16:00 ----------

vl12, обращайтесь к UmbrellaCoders - он за две копейки вам всё сделает, вы подходите друг другу.

Спасибо за совет, но в свои 40 я уже сам научился принимать решения к кому мне обращаться.

Arsh:
Это такой тип заказчика. Большего ужаса не знаю.
Вынет весь мозг за 3 копейки.

Как по мне, так ужасны люди, которые не в своей ветке совершенно не имея ничего толкового ни в качестве комментариев ни по теме допускают возможность обсуждения типа личности заказчика, сколько и как он может/ не может заплатить и т.д. и т.п.

Это же не флудоветка вроде? Какая вам разница какой я заказчик и почему вы считаете что это можно обсуждать в моей теме?

У меня опыт работы с исполнителями более 10 лет в роли ген. директора и владельца и сайтов, и интернет магазинов и т.п. Была и своя веб студия. Поэтому я так категоричен, потому, что знаю и кто такие фрилансеры и кто обитает на подобных форумах. и мне просто поговорить на предмет моей компетентности или платежеспособности и подобных вопросах не интересно. Я предельно конкретно обрубаю весь этот флуд, так как на 6 страниц текста его тут и так 80%. То есть по делу сказать нечего, давай ка скажу "Это стоит пять триллионов долларов и задачу надо начинать с составления ТЗ"

Прекрасно, когда мне нужно будет обучиться как вести проекты и с чего начинать и как формировать бюджет я так тему и назову.

А вторую тему назову "дельные советы обо всем". Вот в эти темы пожалуйста любую инфу. Сюда она зачем?

ziliboba0213:
Вы начали менять ТЗ своего первого поста еще на стадии обсуждения цены. Представляете, что будет дальше 🍿

Я ТЗ не делал вообще в чем меня тут уже упрекали, я просто интересуюсь и выслушиваю мнения и варианты. Более того, я четко дважды написал, что в теме создания парсеров очень слабо пока разбираюсь.

ziliboba0213:
Ну тогда на лям в год на ЗП и рассчитывайте минимум.

Дело в том, что я же говорю о создании самой основы. Вот этот турбопарсер он сейчас под миллион баксов наверно стоит, так как там и работы очень много сделано и это не просто сайт, а бизнес. И создан он был думаю не в таком виде сразу, а намного более простое что-то. Но зачем это обсуждать.

Это может вообще не получиться у меня как бизнес с любыми инвестициями. Я сейчас просто прикидываю можно ли мне основу создать и что она сможет делать и как это будет, и какие минимальные вложения.

ziliboba0213:
5000 магазов, каждый по 30 минут, это 2500 часов работы -> 312 дней по 8 часов в день без остановки - почти год работы человека... С учетом того, что за этот год часть магазов поменяет структуру.

И что? Так и есть, люди сидят и работают. У меня игровой cайт контентом наполняли до 15 человек одновременно месяцами и что?

---------- Добавлено 11.06.2018 в 14:20 ----------

ziliboba0213:
Какой оффтоп, ТСу нужно посчитать цену... :)

А теперь все полученное надо залить в соц сети:

Считаем :p

В соцсети виджет сайта все заливает.

UmbrellaCoders:


а вообще, 5-10к usd вполне реальный бюджет, и ТС может найти исполнителя/команду за такую сумму

Тоже думаю примерно о такой сумме.

Но пока смотрю:

1. можно ли сильно дешевле

2. как не попасть на исполнителей, которых процентов 80 будет в этой теме, которые возьмутся, но ничего толком не сделают.

Собственно поэтому и тему эту создал и уже много ценного в ней, что я засомневался еще больше и точно понял, что нужно искать тех, кто уже что-то похожее сделал и работает. А то на теоретиков нарвусь однозначно.

---------- Добавлено 11.06.2018 в 13:58 ----------

ziliboba0213:
А теперь умножьте это время на 5000 сайтов в примере и оцените свою работу пожалуйста, чтобы уже закрыть эту нелепую тему 🍿

Прям тянет меня сюда что-то, непонятно почему )))...

Очень легко. зарплата добавляльщика 30 тыс в месяц. 1500 в день Чуть меньше сотки за сайт выйдет. Чего сложного?

Если вы не понимаете откуда идет финансирование добавления и т.п., это не значит, что тема нелепая. Нелепые тут в основном ответы. Хотя на всех форумах одно и тоже, из 10 ответов 1 в тему, это форумы.

UmbrellaCoders:



ТС интуитивно чувствует что ничего сверсложного и правильно делает, не надо его разводить и кошмарить суммами в 100к usd

тут даже не интуитивно, а скорее посмотрев другие аналогичные парсеры, но попроще. Если этот серьезные ребята делали и это видно и по оформлению и по количеству сайтов и по работе их менеджеров, то другие, попроще, делали явно практически на коленке. и работает. Просто кто-то знает и умеет это делать просто.

А как сделать сложно и дорого, думаю все знают. Студий много, которые помогут легко освоить любой бюджет.

UmbrellaCoders:
Этот сайт, турбопарсер, хоть и зовется парсером, но ничего он не парсит в принципе. Это агрегатор выгрузок от поставщиков, точка. технически это реализуется на раз два, поставщики скорее всего сами им выгрузки заливают в формате нужном и единственном. ну или делают ссылки на xml, csv выгрузки, а "турбопарсер" их просто забирает по расписанию и кладет/обновляет свою базу. все. никаких технических сложностей там нет, развели бред на три страницы ей богу .


вот и пример такой выгрузки, с которой я работал по одному проекту https://p5s.ru/e-commerce/feed/

Нет, все еще сложнее. они именно парсят. У меня есть интернет магазин и я ничего не предоставлял им, они все сами спарсили. Я у себя их виджет повесил в магазине и он заработал через день.

---------- Добавлено 11.06.2018 в 10:48 ----------

Но я все же думаю, что это не архи сложная задача, так как подобных парсеров десяток наверно и команды их делают самые разные, в том числе видно, что не сильно денежные.

---------- Добавлено 11.06.2018 в 11:07 ----------

borisd:
Суть в том, что у них не некий универсальный парсер, а как я понимаю, у них на каждый источник - отдельный парсер, и все эти парсеры объединены единым интерфейсом управления. Т.е. задача ваша по любому сводится к тому, чтобы написать скрипт парсинга конкретного сайта. Если вам нужен парсинг 10000 сайтов, значит надо будет писать 10000 скриптов. Всякие надстройки и конструкторы особо не помогут, так как в большинстве случаев (но далеко не во всех) скрипты парсинга весьма простые и проблема не в написании таких скриптов, а в выявлении структуры данных сайта-источника, признаков элементов этой структуры, преобразовании в нормализованный вид, т.е. в собственную промежуточную модель данных. А изучение структуры данных и выявление признаков - это по любому ручная работа индивидуально по каждому сайту-источнику и никакого универсального парсера написать невозможно.

Вы упомянули 30000 сайтов источников? Ну, прикиньте, сколько времени понадобится квалифицированному специалисту, чтобы по каждому сайто проанализировать структуру данных, выявить признаки, написать (или настроить) скрипт импорта, протестировать... И так 30000 раз. Но это еще не всё. Надо потом регулярно будет проверять каждый сайт, не поменялась ли структура его данных и если поменялась, вносить изменения в скрипты импорта. Также наверняка пондобится постоянно добавлять новые источники и т.д., т.е. будет нужна постоянная квалифицированная поддержка.




Какие крупные инвесторы? Я указал 100-300 тысяч, а это зарплата квалифицированного специалиста. Ну, можно дешевле найти в странах ближнего зарубежья. Только вы сами то прикиньте, сколько времени понадобиться на разработку импорта индивидуально по 30000 источников и на их поддержку. Боюсь, что мои цифры занижены. Я еще не говорю о том, что при парсинге такого количества объемных сайтов возможно придется распараллеливать процессы на множество компов, также необходимо будет учитывать обрывы связи и повторные соединения, контроль за точностью и целостностью данных и т.д. и т.п. Гладко было на бумаге, да забыли про овраги.

Вот примерно то, что вы описали и есть этот парсер. и наполнение идет ежедневно годами. Только человек, который наполняет не думаю, что больше 30 000 руб. получает. Ему разработали все и он уже мелкие задачи решает.

Мне именно разработка интересна. Потом я сам добавляльщика за указанную сумму и найду. Но разработка должна быть грамотной. Мало того что хорошо все делаться должно, еще и "добавляльщик" должен быть за 30 тыс, а не за 300. Так как если добавлять сможет только сам разработчик, то он плохой разработчик.

---------- Добавлено 10.06.2018 в 23:25 ----------

borisd:
Это не парсер, это интерфейс ко множеству парсеров конкретных сайтов. Вы даже задачу сформулировать не можете.







Разработчики этого парсера сами называют его парсером, все остальные проекты-аналоги так же называются парсерами. Никто не называет их по другому, так как название обычно отражает самую суть, а не имеет задачей расписать все нюансы работы. Ну хотели вы поддеть, естественно не вышло, В чем прикол?

---------- Добавлено 10.06.2018 в 23:27 ----------

Оптимизайка:
Практически все CMS имеют выгрузку в яндекс-маркет. Т.е. XML с четкой структурой. Вот его и берите за основу, парсить уже не нужно, осталось сделать выгрузку в социальные сети. :)

Вопрос в реализации.

---------- Добавлено 10.06.2018 в 23:32 ----------

borisd:

Так что, как выше написали, для старта надо несколько миллионов рублей, а потом 100-300 тысяч ежемесячно на поддержку. Но это я рассматриваю не сам код, а минибизнес.

С таким бюджетом стартуют стартапы с крупными инвесторами. Никаких плюсов эти стартапы не имеют перед командой из программиста из Белоруссии за 40 тыс в месяц и пары копирайтеров или еще кого-то кто нужен по 20 тыс в месяц. Наоборот второй вариант значительно жизнеспособнее, так как сможет месяцы терять на ошибки и эксперименты.

Про миллионы для начала и 300 тыс в месяц для поддержки я бы сам написать мог в первом посте, за такие деньги найти 10 студий, которые бы нашли сами менеджеров, сами сделали ТЗ, сами бы нашли исполнителей и что-то попробовали сами сделать. Не факт что седлали бы, но бюджет освоили весь точно. Я же написал, что это не интересный путь. Что еще мне написать, чтобы понятно стало?

Всего: 113