Size: a a a

2021 September 02

AZ

Anton Zadorozhniy in Data Engineers
Если прям серьезно хотите погрузиться - рекомендую эту книжку, я уже после аспирантуры читал, мне бы помогла https://www.amazon.com/Scheduling-Parallel-Processing-Computer-Communications/dp/1848823096
источник

DT

Danz The Deadly in Data Engineers
Эт минимум 200к руб
источник

DT

Danz The Deadly in Data Engineers
Отправить надо ему
источник

DT

Danz The Deadly in Data Engineers
Маск открывает свой МММ ?
источник

AS

Andrey Smirnov in Data Engineers
Придёт админ, почистит, не надо кормить таких скамеров
источник

AZ

Anton Zadorozhniy in Data Engineers
он нагоняет деньги в общие МММы, они же криптовалюты
источник

M/

Max /b/ in Data Engineers
тем более, это боты..
с живыми спамерами хотя бы поговорить можно...
источник

DT

Danz The Deadly in Data Engineers
Так любая валюта это МММ
источник

AZ

Anton Zadorozhniy in Data Engineers
нет
источник

DT

Danz The Deadly in Data Engineers
Ну как нет, когда да
источник

DT

Danz The Deadly in Data Engineers
Это просто соглашение между людьми
источник

T

T in Data Engineers
С флудом в джопсы пожалуйста
источник

AS

Andrey Smirnov in Data Engineers
Такие посты это вчерашний день, на твиче видел как сам Маск агитировал за крипту и обещал раздачу (ну как Маск, дипфейс или как он там зовётся, но похож)
источник

N

Nikita Blagodarnyy in Data Engineers
@asm0dey а ты не планировал в BDT в спарк-сабмит ран кофигурацию добавить фичу «грузить сырцы, билдовать на спарк хосте и запускать»? Я насколько понял, он щас только умеет взять или локальный жар (и загрузить его) или удаленный жар. И автоматом грузить умеет только сам жар (который указан в Application). А билдовать локально и тащить по сети фет-джар больно накладно.
источник

N

Nikita Blagodarnyy in Data Engineers
хочется чтобы так пиу-пиу, проект засинкался, собрался и засабмитился.
источник

AZ

Anton Zadorozhniy in Data Engineers
vs code remote
источник

MZ

Maxim Zadonskiy in Data Engineers
Котаны, кто mdm пилил?
источник

N

Nikita Blagodarnyy in Data Engineers
ну это можно и уже имеющимся before submit script разруливать. написать там mvn clean package.
источник

N

Nikita Blagodarnyy in Data Engineers
Есть. 5кб зальется быстрее, чем 200Мб.
Побилдить локально и отправить в удалённый спарк чет тоже не работает. Если скормить ему конфигурацию ssh, указать в качестве application локальный джар и оставить дефолтную стадию "загрузить все на сервер перед сабмитом", то он нифига локальный джар не грузит на ssh хост, а тупо подставляет в сабмит локальный путь.
источник

N

Nikita Blagodarnyy in Data Engineers
Может я первый его запустил?)
источник