DZ
Надеюсь переведем на куб и будет меньше головняка
Size: a a a
2019 June 26
DZ
Ну и тогда в догонку, кто запускает Спарк на gke? Видел там Спарк оператор, но пока только присматриваюсь
GP
Ну и тогда в догонку, кто запускает Спарк на gke? Видел там Спарк оператор, но пока только присматриваюсь
на гуглеклауде ты всегда можешь растянуть кубер и пускать спарк на кубере используя кубершедулер
я от него не в востороге, но к нему быстро привыкаешь, и есть один прод который на кубере со спарка 2.2 (сейчас толи 2.3 толи 2.4) и полет уже полтора года нормальный
я от него не в востороге, но к нему быстро привыкаешь, и есть один прод который на кубере со спарка 2.2 (сейчас толи 2.3 толи 2.4) и полет уже полтора года нормальный
GP
на гуглеклауде ты всегда можешь растянуть кубер и пускать спарк на кубере используя кубершедулер
я от него не в востороге, но к нему быстро привыкаешь, и есть один прод который на кубере со спарка 2.2 (сейчас толи 2.3 толи 2.4) и полет уже полтора года нормальный
я от него не в востороге, но к нему быстро привыкаешь, и есть один прод который на кубере со спарка 2.2 (сейчас толи 2.3 толи 2.4) и полет уже полтора года нормальный
там гугл кубер** очепятка
GP
но сути ответа \не меняет - не нужен оператор чтоб там что-то пускать;
GP
но они работают над нормальным оператором и 'правильным' т.к. спарк приложение для кубера не очень типично
DZ
на гуглеклауде ты всегда можешь растянуть кубер и пускать спарк на кубере используя кубершедулер
я от него не в востороге, но к нему быстро привыкаешь, и есть один прод который на кубере со спарка 2.2 (сейчас толи 2.3 толи 2.4) и полет уже полтора года нормальный
я от него не в востороге, но к нему быстро привыкаешь, и есть один прод который на кубере со спарка 2.2 (сейчас толи 2.3 толи 2.4) и полет уже полтора года нормальный
Ну то есть там тонна хелма на запуск у вас?
GP
не очень типично значит что обычно кубер не ожидает что его контейнеры будут хавать целые не делимые ядра и забивать память контенера до хардлимитов постоянно - он дуает это неверно и может кильнуть
GP
Ну то есть там тонна хелма на запуск у вас?
нет, зачем?
GP
Ну то есть там тонна хелма на запуск у вас?
GP
он использовать будет кубер взаместо ярна / мезоса
DZ
Аа, ну я просто читал и там был пример с хелмом. Но это было давно
DZ
И не помню зачем
GP
года 2-3 назад другого (кроме как хелмом) способа не было
DZ
он использовать будет кубер взаместо ярна / мезоса
Ето понятно
DZ
Я думал в эту сторону
DZ
GP
Spark Operator | Marketplace - Google Cloud Platform
https://console.cloud.google.com/marketplace/details/google/spark-operator?pli=1
https://console.cloud.google.com/marketplace/details/google/spark-operator?pli=1
GP
ну попробуй
я к тому, что если не получится, всегда есть способ запустить на кубере нативно спарк
я к тому, что если не получится, всегда есть способ запустить на кубере нативно спарк
DZ
ну попробуй
я к тому, что если не получится, всегда есть способ запустить на кубере нативно спарк
я к тому, что если не получится, всегда есть способ запустить на кубере нативно спарк
okay.jpg