C
Anujith.A.G you're looking for has been banned! Reason: CAS ban.
Size: a a a
2019 October 04
N
А можно, чтоб при деплое точно такого же джарника для спарка старый останавливался, уступая место новому ?
λ
Так он ж точно такой же, зачем его деплоить?
M
Так он ж точно такой же, зачем его деплоить?
полагаю тут речь про имя
λ
полагаю тут речь про имя
Да ты что
λ
C
N
Так он ж точно такой же, зачем его деплоить?
Ну по аналогии после переборки с изменениями подменить
λ
Тогда он не точно такой же
M
Тогда он не точно такой же
Очень полезное замечание
K
https://medium.com/liveramp-engineering/joining-petabytes-of-data-per-day-how-liveramp-powers-its-matching-product-fe7c0f440824 ребята на MR все еще фигарят как деды завещали
OI
Привет!
Вопрос)
Есть какая-нибудь тула удобная для запуска и мониторинга стримов спарковских? (вызывать откуда-нибудь консольные spark-submit'ы и смотреть на них в ярне как-то не очень удобно, имхо)
Вопрос)
Есть какая-нибудь тула удобная для запуска и мониторинга стримов спарковских? (вызывать откуда-нибудь консольные spark-submit'ы и смотреть на них в ярне как-то не очень удобно, имхо)
K
Привет!
Вопрос)
Есть какая-нибудь тула удобная для запуска и мониторинга стримов спарковских? (вызывать откуда-нибудь консольные spark-submit'ы и смотреть на них в ярне как-то не очень удобно, имхо)
Вопрос)
Есть какая-нибудь тула удобная для запуска и мониторинга стримов спарковских? (вызывать откуда-нибудь консольные spark-submit'ы и смотреть на них в ярне как-то не очень удобно, имхо)
статсд
K
и графана
OI
так это же просто мониторинг
а запускать как?)
а запускать как?)
S
Привет!
Вопрос)
Есть какая-нибудь тула удобная для запуска и мониторинга стримов спарковских? (вызывать откуда-нибудь консольные spark-submit'ы и смотреть на них в ярне как-то не очень удобно, имхо)
Вопрос)
Есть какая-нибудь тула удобная для запуска и мониторинга стримов спарковских? (вызывать откуда-нибудь консольные spark-submit'ы и смотреть на них в ярне как-то не очень удобно, имхо)
а зачем вам постоянно запускать стримы?
OI
ну не постоянно
даже хотя бы разово. Мне нужно 20+ штук. Не запускать же их через spark-submit из консоли через какой-нибудь tmux или nohup)
даже хотя бы разово. Мне нужно 20+ штук. Не запускать же их через spark-submit из консоли через какой-нибудь tmux или nohup)
OI
к тому же, если вдруг упало, то было бы логично попробовать рестартануть разок-другой автоматически
+ получать письмо на почту/в слак или телеграм в случае окончательного падения
+ получать письмо на почту/в слак или телеграм в случае окончательного падения
В
Airflow?