Size: a a a

2020 February 19

С

Сюткин in Data Engineers
источник

SO

Simon Osipov in Data Engineers
Сюткин
У нас будет свой митап, раз туда не пускают
И на него придёт больше народу, чем на митап.
источник

АЖ

Андрей Жуков... in Data Engineers
Simon Osipov
Так мы в итоге будем трещать сами и пивас гонять, а не трансляцию смотреть =)
звучит как план
источник

АЖ

Андрей Жуков... in Data Engineers
я тогда не на митап пойду, а к вам!
источник

С

Сюткин in Data Engineers
27 февраля 19.00 пивбар митап DE с онлайн трансляцией
Анонимный опрос
29%
Пойду
38%
Хотелось бы, но не смогу
33%
Посмотрю онлайн
Проголосовало: 48
источник

АБ

Александр Булатов... in Data Engineers
Ну если из Новосибирска вдруг кто хочет - маякните)
источник

SU

Sergey Ufimtsev in Data Engineers
Блин, ну что за дела, такой митап хороший, а регистрация закрыта(((
источник

M

Max in Data Engineers
Сюткин
27 февраля 19.00 пивбар митап DE с онлайн трансляцией
Анонимный опрос
29%
Пойду
38%
Хотелось бы, но не смогу
33%
Посмотрю онлайн
Проголосовало: 48
это для тех, кто не успел зарегаться, но хочет посмотреть?
источник

С

Сюткин in Data Engineers
Max
это для тех, кто не успел зарегаться, но хочет посмотреть?
Все верно, с пивом и колбасками :)
источник

MH

Mr. Heisenberg in Data Engineers
Всем привет, подскажите пожалуйста (scala spark), как сделать join двух датафреймов через like ( поле1 содержит в себе значение поля2) ? Спасибо
источник

ЕГ

Евгений Глотов... in Data Engineers
Mr. Heisenberg
Всем привет, подскажите пожалуйста (scala spark), как сделать join двух датафреймов через like ( поле1 содержит в себе значение поля2) ? Спасибо
Попытаться упростить условие джойна путём подсчёта вспомогательных колонок
источник

MH

Mr. Heisenberg in Data Engineers
Евгений Глотов
Попытаться упростить условие джойна путём подсчёта вспомогательных колонок
Слишком много проблем по созданию дополнительных столбцов
источник

ЕГ

Евгений Глотов... in Data Engineers
Тогда кроссджойн и ждать
источник

AK

Alena Korogodova in Data Engineers
И плакать)
источник

AZ

Anton Zadorozhniy in Data Engineers
Mr. Heisenberg
Всем привет, подскажите пожалуйста (scala spark), как сделать join двух датафреймов через like ( поле1 содержит в себе значение поля2) ? Спасибо
Какие размеры фреймов?
источник

BK

Brusе Kawabata in Data Engineers
Как засабмитить джобу спарка на удаленный кластер с ярном ?
источник

BK

Brusе Kawabata in Data Engineers
Нужно сабмитить обязательно с ноды в кластере, да ? Чтобы там крнфиги были ?
источник

GP

Grigory Pomadchin in Data Engineers
можешь и с локальной машины, если конфиги все на месте; ткни просто в нужный мастер и запускай в кластер моде
источник

GP

Grigory Pomadchin in Data Engineers
в кластер моде чтобы драйвер был где-то в кластере а не на локальной машине
источник

BK

Brusе Kawabata in Data Engineers
Если с локальной тачки сабмитить, то конфиги с кластера нужно сохранить локально и в переменные окружения пути прописать до конфигов, да ?
источник