Size: a a a

2020 February 01

AE

Alexey Evdokimov in Data Engineers
KrivdaTheTriewe
Не верю я в общие пайплайн крейторы вокруг Спарка
не хочешь — не верь. работать они от этого не перестанут.
источник

AE

Alexey Evdokimov in Data Engineers
Denis Gabaydulin
Грамматику написали для языка! Уважаю...
а почему нет.
источник

K

KrivdaTheTriewe in Data Engineers
Alexey Evdokimov
не хочешь — не верь. работать они от этого не перестанут.
с ними просто работать невозможно
источник

AE

Alexey Evdokimov in Data Engineers
больше? вопросов нет? пойду бухать дальше.
источник

K

KrivdaTheTriewe in Data Engineers
а какие вопросы, стартапов кто такое делает - немеряно, но на рынке нет хоть сколько бывменяемой рисовалки воркфлоу
источник

AE

Alexey Evdokimov in Data Engineers
потому что понимания нет нет и рисуют не те люди, которым эксплуатировать
источник

AE

Alexey Evdokimov in Data Engineers
я ещё когда сайтики на пыхе 20 лет назад клепал, делал развёртывание движка на хостинг по одной кнопке. для себя. потому что вручную заябывало всё это делать. а так можно потом пошаговый мастер для донастройки из формочек наклепать, и ты в эфире. ну и всё остальное с таким же подходом. некоторые из них до сих пор онлайн.

вопрос больше идеологии и философии, а я сейчас слишком пьян, чтобы рассуждать.
источник

.

. in Data Engineers
Alexey Evdokimov
я писал. три года в конторе где 100% общения на аглийском.
Я не придираюсь, просто не понял зачем вообще кому-то англоязычному эта помойка понадобилась.
источник

.

. in Data Engineers
Alexey Evdokimov
я ещё когда сайтики на пыхе 20 лет назад клепал, делал развёртывание движка на хостинг по одной кнопке. для себя. потому что вручную заябывало всё это делать. а так можно потом пошаговый мастер для донастройки из формочек наклепать, и ты в эфире. ну и всё остальное с таким же подходом. некоторые из них до сих пор онлайн.

вопрос больше идеологии и философии, а я сейчас слишком пьян, чтобы рассуждать.
Самыми первыми provisioning скриптами были те, что использовались на варез-сцене
источник
2020 February 02

А

Андрей in Data Engineers
Ребят, а подскажите, существуют ли какие-нибудь тулзы для конвертирования hiveql в спарк?
источник

M

Mi in Data Engineers
Андрей
Ребят, а подскажите, существуют ли какие-нибудь тулзы для конвертирования hiveql в спарк?
Вроде spark sql совместим с hiveql
источник

K

KrivdaTheTriewe in Data Engineers
Андрей
Ребят, а подскажите, существуют ли какие-нибудь тулзы для конвертирования hiveql в спарк?
буфер обмена?
источник

А

Андрей in Data Engineers
А точнее, в pyspark
источник

ME

Max Efremov in Data Engineers
Хайв под капотом может работать со спарком...
источник

А

Андрей in Data Engineers
Mi
Вроде spark sql совместим с hiveql
А, то есть будет достаточно через HiveContext передавать hive запросы в спарк?
источник

M

Mi in Data Engineers
Max Efremov
Хайв под капотом может работать со спарком...
Тоже верно
источник

M

Mi in Data Engineers
Можно закинуть hive на spark engine
источник

A

Andrey in Data Engineers
Подскажите в каких каналах в телеграмме можно рекрутеров найти? Резюме хочу скинуть чтобы в базе у них было. Или есть какие то другие ресурсы?
источник

ME

Max Efremov in Data Engineers
Andrey
Подскажите в каких каналах в телеграмме можно рекрутеров найти? Резюме хочу скинуть чтобы в базе у них было. Или есть какие то другие ресурсы?
источник

ME

Max Efremov in Data Engineers
В описании чата есть это
источник