Size: a a a

2021 September 06

А

Анна in Data Engineers
Ребят, привет)
С таким вопросом к вам. У меня есть опыт в DA, мой стэк: Python, MySQL, PostgreSQL, Pandas, Numpy. Хочу перейти в DE, готовлюсь к собесам. Какие вопросы стоит ожидать на позиции джун+?
источник

e

er@essbase.ru in Data Engineers
зависит от компании
 в целом
Кимбал,Инман ,DWH, ETL
упражнения на аналитический sql
источник

А

Анна in Data Engineers
Спасибо большое, это прямо помогло структурировать процесс подготовки)
источник

AK

Artem Kulbasov in Data Engineers
чот у вас стек специфичный для DA, думаю могли бы спокойно и на middle ориентироваться
источник

А

Анна in Data Engineers
А если идти на позицию миддла, что дополнительно следует знать? Hadoop, Cassandra, HBase?

Возможно, специфичный, в основном в академ.среде работала.
источник

N

Nikita Blagodarnyy in Data Engineers
Не существует ответа на этот вопрос. Очень разные компании и очень разный стек у всех.
источник

N

Nikita Blagodarnyy in Data Engineers
Какой смысл курить кассандру, её в России штук 20 наберётся, наверное.
источник

KO

Konstantin Orzhekhov... in Data Engineers
знание SQL (джоины, оконные функции, having, union отличие от union all)
знание теории из основ СУБД (индексы, партиционирование, алгоритмы джоина, умение читать план запроса, внешние таблицы, отличие delete от truncate)
ETL и DWH (как сделать историчность (SCD2), что такое схема звезда, что такое суррогатный ключ, бизнес ключ, exchange partition, понимание слоев данных STG, ODS, AGG, DW)
Знание какого нибудь BI инструмента
Уметь на питоне конвертировать xml/json в csv
Ну и плюсом будет если знаете как работать с Git и как поставлять код (sql скирпты) между ландшафтами
источник

AZ

Anton Zadorozhniy in Data Engineers
This
Еще и должностные обязанности дата инженера отличаются плюс-минус половина отрасли
источник

ET

E T in Data Engineers
изучи aws, разверни базы в докере на инстансах и рассказывай на собессе что делал это каждый день на работе предыдущей. +  Книжка по DWH кимбала
источник

ET

E T in Data Engineers
можно еще DDIA прочитать и со спарком поиграться.
источник

KO

Konstantin Orzhekhov... in Data Engineers
для мидла все то же самое только + наличие 1-2 лет опыта работы в продакшен проекте со всем вышеперчисленным
источник

NN

No Name in Data Engineers
И в большинстве случаев это вообще никому не будет интересно, потому что aws у нас мало
источник

A

Antony in Data Engineers
а для синьора?
источник

N

Nikita Blagodarnyy in Data Engineers
Где-то кубики в нифи рисуют, где-то на пыхе пайплайны делают. Всё не выучишь. Лучше учиться учиться и знать азы как советуют выше и компуктер саенс особенно.
источник

ИК

Иван Калининский... in Data Engineers
для синьора - чтобы были пара мидлов и пачка джунов))
источник

А

Анна in Data Engineers
Классно, спасибо! А что сейчас вообще в индустрии происходит? Вижу, что вакансии, которые хорошо бы называть DE, обзывают DA, в каждой компании свой стэк и вообще все как-то непонятно) Где лучше смотреть вакансии непосредственно на DE?
источник

AZ

Anton Zadorozhniy in Data Engineers
Синьор это такой мидл за которым надо меньше приглядывать и разжевывать, все разница
источник

А

Анна in Data Engineers
А, еще вопрос. По поводу BI. Я освоила Tableau, насколько инструмент востребованный по сравнению с Power BI? Его будет достаточно или все же второй лучше изучить?
источник

N

Nikita Blagodarnyy in Data Engineers
В @datajobs между потоками сознания и обсуждением зарплат иногда проскакивают вакансии.
источник