Size: a a a

2021 November 21

A

Alex in Moscow Spark
140+ пользователей

Каждый запускает по кернелу, кто-то питон, кто-то спарк

Кернелы (где будет выполняться питон, или кто делает спарк сабсит) где будут выполняться?
В том же поде?
источник

GP

Grigory Pomadchin in Moscow Spark
кернелы в том ж поде (в том же контейнере пода); риквесты спарка и воркеры алоцирубтся в неймспейсе в котором разрешишь
источник

GP

Grigory Pomadchin in Moscow Spark
140 мало
источник

A

Alex in Moscow Spark
Это пользователей, самих кернелов 400+
источник

GP

Grigory Pomadchin in Moscow Spark
Я не вижу проблем если это локально
источник

A

Alex in Moscow Spark
А с питоном и р что делать? В том же поде это будет больно
источник

GP

Grigory Pomadchin in Moscow Spark
хоть милион
источник

GP

Grigory Pomadchin in Moscow Spark
Почему?
источник

GP

Grigory Pomadchin in Moscow Spark
Петон и скала отлично работают
источник

GP

Grigory Pomadchin in Moscow Spark
Как соберешь так и будет
источник

A

Alex in Moscow Spark
20 кернелов по 100гб и это уже 2тб минимум под должен быть
источник

GP

Grigory Pomadchin in Moscow Spark
не понял
источник

GP

Grigory Pomadchin in Moscow Spark
Как это получается
источник

GP

Grigory Pomadchin in Moscow Spark
имеджи то теже самые
источник

GP

Grigory Pomadchin in Moscow Spark
может у тебя там кейс какой-то
источник

GP

Grigory Pomadchin in Moscow Spark
Но воьщем есть одна оконная компния на юзера выделяют просто жупитер в кубере
источник

GP

Grigory Pomadchin in Moscow Spark
Так проще и по правам и по ресурсам и пользователей больше 140а
источник

GP

Grigory Pomadchin in Moscow Spark
ну в ноуте просто кернелы поддерживаемые
источник

GP

Grigory Pomadchin in Moscow Spark
конечно не 20
источник

GP

Grigory Pomadchin in Moscow Spark
3-4
источник