Size: a a a

2021 September 06

ЕГ

Евгений Глотов... in Data Engineers
Кароч вы ограничили функционал инженера и не можете по такому описанию его найти)
источник

ЕГ

Евгений Глотов... in Data Engineers
Или это кто-то другой искал dqe🤔
источник

AZ

Anton Zadorozhniy in Data Engineers
Интересно, раньше это все были аналитики, но мне нравится дополнительный фокус на качестве данных
источник

NN

No Name in Data Engineers
У нас самописный фреймворк.
Плюс, я в пайплайнвах также делал и собственные кастомные проверки, и deeque.
источник

РП

Роман Пашкевич... in Data Engineers
Мы спокойно таких находим, вакансии закрываются. А вся эта речь зашла от вопроса Анны.
источник

ЕГ

Евгений Глотов... in Data Engineers
Аналитик, который может загрузить источник, становится инженером😆
источник

AZ

Anton Zadorozhniy in Data Engineers
SAP HANA это вроде изначально аналитические витрины, у вас витрины над витринами?
источник

РП

Роман Пашкевич... in Data Engineers
Переслано от Анна
Классно, спасибо! А что сейчас вообще в индустрии происходит? Вижу, что вакансии, которые хорошо бы называть DE, обзывают DA, в каждой компании свой стэк и вообще все как-то непонятно) Где лучше смотреть вакансии непосредственно на DE?
источник

РП

Роман Пашкевич... in Data Engineers
Переслано от Роман Пашкевич...
А так и есть. В каждой компании свое понимание DE \ DA \ DQ. У нас в Х5 вообще появились DQE.
источник

РП

Роман Пашкевич... in Data Engineers
SAP BW это витрины, а SAP HANA это хранилище для этих витрин. (в моем понимании и уровне знаний о BW\HANA)
источник

РП

Роман Пашкевич... in Data Engineers
Мне повезло, нужные мне данные в HANA тупо лежат в виде табличек 3нф.
источник

AZ

Anton Zadorozhniy in Data Engineers
я обычно делю так:
- инженер или пишет код или сопровождает что-то (тогда мы его называем опс)
- аналитик выдает анализ (мб в форме кода, но это редко код который потом как есть бежит в продакшене)
- эксперт выдает экспертиза
и так дальше
источник

AZ

Anton Zadorozhniy in Data Engineers
а, ну так у вас получаются зависимые витрины
источник

ЕГ

Евгений Глотов... in Data Engineers
По-моему кто-то прям целенаправленно искал dqe и не мог найти
источник

ЕГ

Евгений Глотов... in Data Engineers
Эх, и у вас инженеры код пишут...)
источник

РП

Роман Пашкевич... in Data Engineers
Да, в данном примере это зависимая витрина была, конечно.
источник

AZ

Anton Zadorozhniy in Data Engineers
сам не знаю что делать, бью по рукам - все равно пишут
источник

AZ

Anton Zadorozhniy in Data Engineers
в тему качества данных и гавернанса, хорошие знакомые зарелизили спеку и немножко реализаций, мб кому пригодится https://github.com/opendatadiscovery/opendatadiscovery-specification
источник

ЕГ

Евгений Глотов... in Data Engineers
В 2к21 конфиги надо писать ток)
источник

AZ

Anton Zadorozhniy in Data Engineers
удалять код надо, лучшие инженеры больше удаляют кода, чем пишут сами
источник