Привет! У нас сейчас проходит чемп по программированию ии (нужно написать стратегию для бота, сражающегося в игровом мире, похожем на
Paper.io). Если кому-то интересно, присоединяйтесь))
https://aicups.ru/HDInsight это адаптация HDP для Azure, туда можно переехать со своего HDP кластера, там есть Oozie, Hive, Ranger и прочая радость, удобно с более-менее персистентными кластерами; Databricks это чисто Spark платформа которая подразумевает по большей части self-service ваших сатанистов