Size: a a a

2020 November 12

GP

Grigory Pomadchin in Data Engineers
Nikita Blagodarnyy
Слушаю конференцию. Говорят, что скала написана на джаве.
хорошая какая конференция
источник

N

Nikita Blagodarnyy in Data Engineers
Grigory Pomadchin
хорошая какая конференция
да. еще рассказывают как по scp csv грузить.
источник

t

tenKe in Data Engineers
ну ладно вам, токсичные троли
источник

t

tenKe in Data Engineers
мож оно новичковое
источник

t

tenKe in Data Engineers
чо вы сразу
источник

t

tenKe in Data Engineers
или чтобы войти в ойти
источник

AE

Alexey Evdokimov in Data Engineers
не обязательно входить в ит через жопу
источник

A

Alex in Data Engineers
tenKe
или чтобы войти в ойти
из выйти
источник

N

Nikita Blagodarnyy in Data Engineers
источник

AT

Al T in Data Engineers
да, хочется навалять жирафу
источник

SD

Serg D. in Data Engineers
Привет. Друзья, нужна помощь, не могу разобраться в приоритетах параметров Oozie.
Стартую джобу: oozie job -run -config job.properties
В  job.properties определяю параметр: mapreduce.job.queuename отличный от default
Но, когда работает action, вижу что исполняется в очереди default. Т.е. он на каком-то этапе переопределяется. Предполагаю, что берется значение из /etc/hadoop/.../mapred-site.xml
Но мне всегда казалось что явное указание параметра имеет более высокий приоритет. В доке инфу чет не найду. Буду благодарен если будет ссылка.
Аналогичная история с параметром user.name
источник

SD

Serg D. in Data Engineers
C user.name вроде разобрался. Его нельзя в принципе переопределить для определенных actions
источник

AR

Alexander Ryndin in Data Engineers
Коллеги, есть необходимость обучить большое кол-во разработчиков Sparkу. При этом нужно чтобы не просто рассказали базовые вещи, но чтобы были темы тюнинга, best practice, etc
источник

АЖ

Андрей Жуков... in Data Engineers
Alexander Ryndin
Коллеги, есть необходимость обучить большое кол-во разработчиков Sparkу. При этом нужно чтобы не просто рассказали базовые вещи, но чтобы были темы тюнинга, best practice, etc
Learning Spark, Definitive Guide, High performance Spark, например
источник

АЖ

Андрей Жуков... in Data Engineers
Не думаю,  что есть прям хорошие курсы по спарку
источник

NN

No Name in Data Engineers
Андрей Жуков
Не думаю,  что есть прям хорошие курсы по спарку
Вот только что в другом чатике обсуждали
источник

АЖ

Андрей Жуков... in Data Engineers
No Name
Вот только что в другом чатике обсуждали
В каком?
источник

NN

No Name in Data Engineers
источник

NN

No Name in Data Engineers
Но там примерно тот же смысл
источник

K

KrivdaTheTriewe in Data Engineers
Alexander Ryndin
Коллеги, есть необходимость обучить большое кол-во разработчиков Sparkу. При этом нужно чтобы не просто рассказали базовые вещи, но чтобы были темы тюнинга, best practice, etc
Полно контор сча консалтеров, правда большинство что я видел под питон
источник