кстати, пипл.

я тут спустя три года разработки пайплайна для своего спарканутого ETL (и 15 тыщ деплойнутых кластеров) решил, наконец, для него какой-никакой гуй сделать. а то до сих пор сатанисты конфиги писали ручками. и лажали периодически.

можно я вам пару скриншотов покажу, а вы мне скажете своё фи?

Кмк лучше писать конфиг в тексте (гит, дифф, вот это все), а в гуе только визуализировать

Читаешь мои мысли! Я вот так хотел:

На Cloudera
На Hortonworks
На Собрали сами (Bigtop)
На Собрали сами (не BigTop)
На AWS (Elastic MapReduce) [Cloud]
На MapR
На IBM Open Platform
На Pivotal Big Data Suite
На Azure HDInsight [Cloud]
На Google Cloud Platform (Dataproc) [Cloud]
На Alibaba/Aliyun (E-MapReduce) [Cloud]
На Яндекс.Облако (Dataproc) [Cloud]
На Arenadata Hadoop (ADH)
На Mail Cloud Solutions (Big Data) [Cloud]
Не на Hadoop: S3 + Spark
Не на Hadoop: Clickhouse
Не на Hadoop: Google BigQuery
Не на Hadoop: Snowflake
Не на Hadoop: Redshift
Не на Hadoop: Greenplum
Не на Hadoop: Другие системы (напишу в чат)

см. третий скрин

Ну там просто рендеринг, как я понял, я имел в виду что изначально писать в редакторе

кстати, пипл.

я тут спустя три года разработки пайплайна для своего спарканутого ETL (и 15 тыщ деплойнутых кластеров) решил, наконец, для него какой-никакой гуй сделать. а то до сих пор сатанисты конфиги писали ручками. и лажали периодически.

можно я вам пару скриншотов покажу, а вы мне скажете своё фи?

если прикручу туда подсветку синтаксиса и автокомплит, будет редактор

А есть загрузка параметров из жсона или ямла? Мы такое делали пару лет назад

см. третий скрин

я тут недавно давал ссылку на выступление Холден, она в красках все описала (когда обсуждали использование arrow в спарк)

yaml он хрупкий слишком