Почему ищете другое место?
Больше денег хочется )
уже не нужны промпт инженеры, чтоб ставить задачи, сейчас домохозяйки с отрицательными знаниями кодинга вкатываются в ИТ)
В теории да, на практике в сложном бизнесе с кучей систем и интеграциями - нет . Даже адекватно разобраться в бизнес экспертизе мало у кого выходит на приемлемом уровне. Сам код писать можно и макаку научить, а вот системно мыслить, учитывать стопиицот нюансов и зависимостей и ИИ не умеет.
интересно, а сколько денег предлагают за эту должность?)
У меня Джуниоры 100к , миддл 200-300, сеньоры 370-400к net
Так а кто же такой этот data Engineer? У вас какие обязанности на нем? и что такое
Ладно, объясню на пальцах. К примеру, у тебя есть crm , erp и ещё куча сервисов в компании. Чтобы из этого всего слепить нормальную аналитику , нужно это всё собрать в одном месте , очистить, объединить , посчитать атрибуты, сделать модели с агрегацией и разной степени детализации, с разной частотой обновления, которые просят аналитики, бизнес и ТД и доставить потребителям. То есть сделать data warehouse и разработать дата пайплайны. Дата инженер этим и занимается. Если очень кратко и без подробностей. На текущем месте у меня больше 40 источников , хранилище на несколько петабайт и 8 дата инженеров.
Вот поэтому я не могу серьезно относиться к тому что ты говоришь, потому что выглядит как тупое копирование из поиска, без понимания, что это значит. Так не бывает, чтоб руководитель не мог все это написать сам и внятно обьяснить, о чем речь.
А я не могу серьезно говорить с человеком , который не знает что такое BI (business intelligence), дата инжениринг. Ну хоть бы загуглил. Зачем мне объяснять элементарные вещи ? Странно, если ты работаешь в Гугле и не знаешь что это такое.
Ты намешал совершенно разные специальности тут, с тем же успехом можно и про курьеров тут рассуждать. Software Engineer - Data Engineer - Devops Engineer, это все совершенно разные специальности, при переходе на любую из них нужно переучиваться,
Ну в идеале да, но у меня многие фуллстаки и все приходится уметь. Дата инженер он по сути во всем должен разбираться плюс ещё в админстве , секьюрити, bi и в ml том же чтоб собирать фиче store. Хоть и не на том уровне, который знает эксперт в этих областях.
Что рудимент - Скала или Спарк?
Спарк и вообще все что связано с хадуп. Устаревают технологии и выходит новые. Например сейчас в тренде apache iceberg, хотя как по мне , ещё довольно сыроват..
С ноября закупаюсь понемногу
