GP
их комбинированно используют умные дядьки сейчас
ну в ярне сделать динамическую алокацию и запросов больше ресурсов просто
в spark on k8s вроде только в 3й версии что-то подвезут
Size: a a a
2019 September 29
A
GP
ну в ярне сделать динамическую алокацию и запросов больше ресурсов просто
в spark on k8s вроде только в 3й версии что-то подвезут
в spark on k8s вроде только в 3й версии что-то подвезут
даинмическая алокация была в спарке 2.2; когда spark-k8s был форком
GP
они не успели перетащить функционал в виде экстернл шафл сервисов => нет дин алокации ресов
A
по мне кубик под стандартные микросервисы + варианты где у тебя “прочитал кафку/s3-попроцессил-закинул в кафку/s3”
если насиловать hdfs и тд, поднять-положить диск то всётаки доверяю больше yarn
если насиловать hdfs и тд, поднять-положить диск то всётаки доверяю больше yarn
СХ
кубер не был заточен под 90% загрузку контейнеров, отсюда огромные проблемы при использовании взаместо медленного ярна
я бы сказал не 90, а скорее 60
ПФ
я бы сказал не 90, а скорее 60
не-не, 60 точно норм работает. Но про 90 интересный поинт.
СХ
не-не, 60 точно норм работает. Но про 90 интересный поинт.
ну до 60 влючительно, 70 же не оч
ПФ
действительно, там же идеология в том, что "под уже убит"
ПФ
у нс было 75
ПФ
на 9 физическиз серверах
ПФ
было норм
GP
я бы сказал не 90, а скорее 60
все что меньше 25% загрузки контейнера по дефолту кубер считает подозрительным и приходится крутить гайки уже
GP
не спроста когда жава не умела в сигруппы по дефолту флаг респекта сигрупп резал хип до 25% ресурсов контейнера
СХ
все что меньше 25% загрузки контейнера по дефолту кубер считает подозрительным и приходится крутить гайки уже
ну с крио уже такого нет
GP
крио?
ПФ
не спроста когда жава не умела в сигруппы по дефолту флаг респекта сигрупп резал хип до 25% ресурсов контейнера
да, хорошие были времена. Мы так весь кластер один раз уложили своей приложулей
СХ
крио?
сейчас для кубера есть устаревший докер и cri-o