UD
( пока оперативка не станет как чугунный мост за планку)
Size: a a a
2020 April 03
DZ
сейчас каждое 8е собеседование из 10 проходит примерно так: нууу java когда-то давно в универе пробовал, а сейчас на питоне хуячу
Я джаву не пробывал вовсе, чтобы понять что питон не нужен для спарка
P
Я джаву не пробывал вовсе, чтобы понять что питон не нужен для спарка
ну, ща вас тогда другой админ забанит, который пробовал джаву)
DZ
ну, ща вас тогда другой админ забанит, который пробовал джаву)
а его который питон
DZ
альтернатив особо нет
то то спарк придумали и распределенные алгоритмы придумывают, чтобы потом взять тачку на 1Тб памяти для питона
P
блин, вы этим бла бла бла голосовалку спихнули куда-то в жопу
UD
то то спарк придумали и распределенные алгоритмы придумывают, чтобы потом взять тачку на 1Тб памяти для питона
а вот в машинных кодах то
DZ
Переслано от Pavel
Если у меня будет возможность, я бы писал...
Анонимный опрос
24%
Прикладной код на Java
37%
Прикладной код на Scala
21%
Прикладной код на Python
11%
Прикладной код на чём-то экзотическом
11%
ETL на Java
46%
ETL на Scala (spark sql решает)
24%
ETL на Python
7%
ETL на чём-то экзотическом
P
о 🙂
DZ
а вот в машинных кодах то
при чем тут это. скала высокого уровня.
UD
при чем тут это. скала высокого уровня.
Порог вхождения и скорость выполнения хотелок заказчиков
AZ
Scala не считается чем-то экзотическим?
AZ
я бы писал DSLли для ETL и метаданных, что выбрать-то?
АЖ
смешная третья опция
як
Ребзя, чё значит "бинарный Ignite visor"? Я про такой не слышал никогда.
як
Переслано от Ilya K
Вы из исходников запускаете, а надо из бинарного
AZ
не очень понятно что такое "писать ETL на", как правило ETL пишется на ETL платформе/фреймворке, в этом смысле было бы логично "писать прикладной ETL на DSL под" и "писать ETL платформу на"
ME
( пока оперативка не станет как чугунный мост за планку)
вернёмся к MR, со скидыванием на хард))
P
не очень понятно что такое "писать ETL на", как правило ETL пишется на ETL платформе/фреймворке, в этом смысле было бы логично "писать прикладной ETL на DSL под" и "писать ETL платформу на"
