ПФ
ты когда говоришь про крио все думают про kryo 😊
Size: a a a
2019 September 29
GP
ну я не спорю что можно сделать; пускал проект один на ажуре; на кубере постоянный спарк стриминг кафку жрет
GP
и он уже 2 года жрет, как раз со спарка 2.2 (конечно он сейчас на 2.4)
СХ
😐я не фанат облаков, и тем более с российскими заказчиками
СХ
правда 2 года назад ажур, эт конечно ты экстримал
A
просто когда начинается вопрос не про клауды, а про локальные инсталяции и “мы будем крутить всё в k8s вместо старого хадупа”
то у меня всегда вопрос “а hdfs чем заменять будете” ?
эмуляция s3 в опенстек ещё та радость
то у меня всегда вопрос “а hdfs чем заменять будете” ?
эмуляция s3 в опенстек ещё та радость
GP
просто когда начинается вопрос не про клауды, а про локальные инсталяции и “мы будем крутить всё в k8s вместо старого хадупа”
то у меня всегда вопрос “а hdfs чем заменять будете” ?
эмуляция s3 в опенстек ещё та радость
то у меня всегда вопрос “а hdfs чем заменять будете” ?
эмуляция s3 в опенстек ещё та радость
сервисы заменяют; типа s3 или ажуры или гугл
GP
но это опять же не полноценное решение
GP
и никто не мешает пускать хдфс без ярна
GP
просто не стартуешь ярно сервисы и все
A
и зачем тогда 2 разных кластера держать =) один с хдфс, один с кубиком?
GP
да зачем
GP
на кубере просто поднимешь хдфс
СХ
на кубере просто поднимешь хдфс
😓блин, а кто за ним потом следить будет?
A
все же помнят тот доклад от твитера вроде про их игру со спарком и хдфв в кубике?
СХ
вот уж что, а ceph\hdfs и кубер должны быть в разных местах
GP
я не понмю) у меня хдфс сначала жил в контенерах 5 лет назад
GP
а потом я и в кубер сунул и все ок было
DM
И хотел в итоге слерм затащить; не знаю что там в результате сейчас
слёрм для обучения