Size: a a a

2020 December 30

AK

Artemiy Kzr in Data Engineers
dbt+Redshift
источник

PA

Panchenko Andrey in Data Engineers
!report
источник

R

Runtime Еггор in Data Engineers
Товарищи, а как мне проверить, что все значения из WrappedArray() точно есть во втором датафрейме в качестве id?
Spark, scala.
источник

R

Runtime Еггор in Data Engineers
Есть колонка ids, в которой лежит много-много WrappedArray() с айдишниками.
Некоторые просрочены, все актуальные лежат в другом датафрейме. По сути хочу найти их intersection.
источник

PS

Pavel Shekurdyaev in Data Engineers
Коллеги всем привет. Есть те кто использует hadoop от AD?
источник

V

Vasiliy in Data Engineers
А то
источник

V

Vasiliy in Data Engineers
Пока правда оч скромно, но только начали
источник

PS

Pavel Shekurdyaev in Data Engineers
Vasiliy
А то
Скажите
источник

PS

Pavel Shekurdyaev in Data Engineers
а монитоинг работает?
источник

V

Vasiliy in Data Engineers
При развёртывании проблем ни у кого не возникло... Жалоб не помню.
источник

V

Vasiliy in Data Engineers
Уточните что конкретно сломано, я у ребят спрошу)
источник

PS

Pavel Shekurdyaev in Data Engineers
Vasiliy
Уточните что конкретно сломано, я у ребят спрошу)
ну я не вижу метрик скажем HDFS ни в графите ни в графане. Развернулось тоже без проблем
источник

PS

Pavel Shekurdyaev in Data Engineers
Vasiliy
При развёртывании проблем ни у кого не возникло... Жалоб не помню.
у вас видны?
источник

V

Vasiliy in Data Engineers
У меня прекрасно виден спарк коннектор, через который инфа тащится)
Я спросил, отвечу в пм как будет реакция
источник

PS

Pavel Shekurdyaev in Data Engineers
Vasiliy
У меня прекрасно виден спарк коннектор, через который инфа тащится)
Я спросил, отвечу в пм как будет реакция
спасибо
источник

AF

Asd Fgh in Data Engineers
Кто-нибудь юзает cloudera private cloud platform?
источник

AE

Anastasiya Esiunina in Data Engineers
Всем привет,
кто-нибудь использует DBT для spark? как обходили проблему с отсутсвием таблицы во время ее подсчета? (дбт делает create table as select для НЕ инкрементальных моделей)
источник

RK

Ruslan Kotenko in Data Engineers
Добрый вечер, изучаю Скалу где-то месяц, начал с курсов Тинькофф Банка, хочу двигаться в направлении BigData инженера. Где-то 5 месяцев работал backend-разработчиком на джаве, решил попробовать немного другое направление.  Выбрал стек Scala, Hadoop, AWS(общее понимание принципов работы). Хотел бы у бывалых скалистов попросить ресурсы для обучения технологиям из этого стека (курсы, статьи, видео).
источник

KO

Konstantin Orzhekhov... in Data Engineers
Ruslan Kotenko
Добрый вечер, изучаю Скалу где-то месяц, начал с курсов Тинькофф Банка, хочу двигаться в направлении BigData инженера. Где-то 5 месяцев работал backend-разработчиком на джаве, решил попробовать немного другое направление.  Выбрал стек Scala, Hadoop, AWS(общее понимание принципов работы). Хотел бы у бывалых скалистов попросить ресурсы для обучения технологиям из этого стека (курсы, статьи, видео).
Добрый день, что можете сказать по поводу курсов от Тинькоф банка ?
источник

RK

Ruslan Kotenko in Data Engineers
Konstantin Orzhekhovsky
Добрый день, что можете сказать по поводу курсов от Тинькоф банка ?
Много хороший заданий, но большую часть теории придётся гуглить. Как вступление в язык, при хоть каких-то навыках программирования - отличный курс.
источник