ЕГ
Всё это положить на ноут
Size: a a a
2019 March 14
ЕГ
Стащив с кластера
ЕГ
Спарк будет когда запускаться, будет читать конфиги и знать, где находится кластер
R
Евгений Глотов
Конфиг спарка просто настроить
на стороне кластера? spark-defaults.conf?
ЕГ
Не, на стороне клиента
ЕГ
Клиент должен узнать про существование кластера, и все адреса и конфиги
R
Спасибо большое, буду ковырять.
хочет в итоге получить конструкцию, что приложение на скале пишется в интеллидж, там же выполняется и результат падал в терминалку интелиджа
хочет в итоге получить конструкцию, что приложение на скале пишется в интеллидж, там же выполняется и результат падал в терминалку интелиджа
ЕГ
Обычно на всех нодах стоит папка, например, /usr/hdp
ЕГ
Там где-то внутри есть папка conf
R
Евгений Глотов
Клиент должен узнать про существование кластера, и все адреса и конфиги
ну да, так и думал, просто прописывать все кластеры пытался в таком духе
R
R
Евгений Глотов
Обычно на всех нодах стоит папка, например, /usr/hdp
так и есть 😉 тоже hdp, а на ноуте в какую директорию складывать, в resources проекта?
ЕГ
Не, мастер будет ярн
ЕГ
Деплой-мод лучше клиент
R
ок, ярн - еще лучше
ЕГ
А фиг знает, где спарк-хоум сделаете, там и будет
R
Евгений Глотов
А фиг знает, где спарк-хоум сделаете, там и будет
ок, понял, то есть интеллидж с плагином спарка норм окружения переменных с макоси считывает?
ЕГ
Не использовал плагин спарка, не использовал макось)
R
ок, спасибо, понятно хотя бы как и с чем эксперементировать 😉
ЕГ
Я вроде когда-то Спарк_Хоум прописывал руками в переменные окружения для конкретной конфигурации