Size: a a a

2021 September 06

РП

Роман Пашкевич... in Data Engineers
А так и есть. В каждой компании свое понимание DE \ DA \ DQ. У нас в Х5 вообще появились DQE.
источник

РП

Роман Пашкевич... in Data Engineers
Часть вакансий можешь чекать в Data Jobs канале.
источник

А

Анна in Data Engineers
Ого, это в каком формате? DQE.
источник

А

Анна in Data Engineers
Уже состою там, спасибо) Буду поглядывать.
источник

РП

Роман Пашкевич... in Data Engineers
Это попытка скрестить ужа с ежом. Нужны люди которые понимают что данные нужны качественные, и могут выдать их команде. При этом, они должны уметь продукту эти данные достать \ загрузить из других систем.
источник

AZ

Anton Zadorozhniy in Data Engineers
Интересно, это получается инженер которые независимые витрины строит?
источник

D

Dmitry in Data Engineers
Обычно это тестировщик, который в sql и немножко в питон умеет
источник

РП

Роман Пашкевич... in Data Engineers
Это человек который может и витрину построить команде, и обернуть ее проверками качества. И загрузить сырые данные в пространство команды. И зачастую они же являются аналитиками, и общаются с консультантами систем-источников по всем вопросам.
источник

РП

Роман Пашкевич... in Data Engineers
В рамках продукта, DQE это точка входа данных в команду.
источник

AZ

Anton Zadorozhniy in Data Engineers
Ясно, спасибо
источник

NN

No Name in Data Engineers
Независимые от кого/чего?)
источник

AZ

Anton Zadorozhniy in Data Engineers
От data governance конечно)
источник

NN

No Name in Data Engineers
Чёт мне не видится это такой уж хорошей идеей
источник

KO

Konstantin Orzhekhov... in Data Engineers
тенденций на рынке BI не много, можно только Qlik выделить как самый популярный в крупных компаниях РФ.
источник

AZ

Anton Zadorozhniy in Data Engineers
Я думал вы пошутили и пошутил в ответ) имел в виду обычные независимые витрины, стандартный архитектурный шаблон
источник

KO

Konstantin Orzhekhov... in Data Engineers
Затем по популярность Power BI, а вот Tableau это больше в зарубежных вакансиях. Раньше Cognos был популярен) но сейчас он уже проигрывает

Но для DE знание BI инструмента нужно достаточно неглубокое.... в основном чтобы понимать как удобнее предоставлять данные для построения отчетов. И знать как можно оптимизировать производительность отчетов или как детектить ошибку. Куда зайти чтобы увидеть что шлет в базу инструмент, для сборки дашборда
источник

NN

No Name in Data Engineers
Боюсь, что я способен удивлять вопиющими пробелами в образовании.)
Я, если честно, про этот архитектурный шаблон не знаю, похоже. Ну, или знаю, но просто не в курсе, что он так называется.
источник

ЕГ

Евгений Глотов... in Data Engineers
Звучит как обычный инженер, у которого даталейк провис по качеству, а задачу срочно надо сделать
источник

РП

Роман Пашкевич... in Data Engineers
Не все данные есть в даталейке. Иногда команда хочет проверить гипотезу и ей нужны какие то данные... вот DQE пойдет и загрузит их.  Если эти данные будут признаны необходимыми дальше, то будет поставлена задача на коллег ETL чтобы грузить данные промышленными инструментами.
источник

AZ

Anton Zadorozhniy in Data Engineers
Наверняка знаете: независимые витрины это те что строятся напрямую из данных источника, над которыми не сделана интеграция и историзация; зависимые витрины строятся из детального слоя (3НФ, датаволт или анкор), где эти задачи решены
источник