Size: a a a

2021 December 26

ЕГ

Евгений Глотов... in Moscow Spark
источник

ЕГ

Евгений Глотов... in Moscow Spark
Неплохо, неплохо
источник

ЕГ

Евгений Глотов... in Moscow Spark
Ну видимо устранили
источник

ЕГ

Евгений Глотов... in Moscow Spark
Или у вас преемпшена не было
источник

NN

No Name in Moscow Spark
Я тоже на 3.2 пока не натыкался
источник

A

Alex in Moscow Spark
А где преемш вы используете?

У нас только в 1 или 2х етл джобах есть параллельный запуск джобов на одном кластере (ну это который я знаю), все остальные только динамик аллокейшен активно используют
источник

ЕГ

Евгений Глотов... in Moscow Spark
Сколько у вас сотен юзеров и тысяч етл-джобов?
источник

ЕГ

Евгений Глотов... in Moscow Spark
Если 0 и 0, то он не особо нужен)
источник

A

Alex in Moscow Spark
Свыше 60к отрабатывает спарк джобов в сутки
источник

ЕГ

Евгений Глотов... in Moscow Spark
А юзеры?
источник

A

Alex in Moscow Spark
Несколько сотен
источник

A

Alex in Moscow Spark
Это джобы которые пользователями заскедулены
источник

ЕГ

Евгений Глотов... in Moscow Spark
Не, а интерактив?
источник

ЕГ

Евгений Глотов... in Moscow Spark
Какой процент утилизации кластера?
источник

ЕГ

Евгений Глотов... in Moscow Spark
По ярну
источник

A

Alex in Moscow Spark
Но конкретно для етл перкоивки между mssql/vertica/hdfs отдельная балалайка которая из очереди и своего скедулера джобы выгребает и в одном спарк кластере перекидывает данные
источник

A

Alex in Moscow Spark
😭В пиках 100
источник

A

Alex in Moscow Spark
Вообще меньше 70 редко опускается
источник

ЕГ

Евгений Глотов... in Moscow Spark
У ребят в среднем 100)
источник

ЕГ

Евгений Глотов... in Moscow Spark
Хотя может уже подвезли нод)
источник