Size: a a a

2021 April 30

S

Solyar in Data Engineers
Всем привет. Кто живет в K8s с кластером PostgreSQL развёрнутым с помощью Zalando Operator?
источник

А

Алексей in Data Engineers
Привет, подскажите, где можно взять пакет ambari-agent для 2.6.2 для ubuntu 16? Все репозитории хортонворкса погашены, а очень нужно расширить кластер на новый сервер. Может у кого сохранилось?
источник

N

Nikita Blagodarnyy in Data Engineers
Граждане, а как так может быть, что Hive свои запросы на спарке гоняет, а ни в YARN UI, ни в spark history ничего нету про это?
источник

GP

Grigory Pomadchin in Data Engineers
юзер мож не тот
источник

GP

Grigory Pomadchin in Data Engineers
очередь ярна мож не ту смотришь
источник

GP

Grigory Pomadchin in Data Engineers
а может вообще не там запускаешь жобы
источник

GP

Grigory Pomadchin in Data Engineers
источник

GP

Grigory Pomadchin in Data Engineers
посмотри юайку драйвера спарка
источник

N

Nikita Blagodarnyy in Data Engineers
Да там только один. Очереди все просмотрел.
Я вычитал, что он может локальный спарк гонять в отладочных целях.
источник

N

Nikita Blagodarnyy in Data Engineers
А где её взять-то?
источник

GP

Grigory Pomadchin in Data Engineers
4040 на драйвере
источник

GP

Grigory Pomadchin in Data Engineers
или ты в кластер моуде запустил жобу?
источник

GP

Grigory Pomadchin in Data Engineers
тогда только искать по логам)) где драйвер
источник

N

Nikita Blagodarnyy in Data Engineers
Я пока ничего не понимаю. Hive никто не собирался использовать для выполнения запросов, поднимали чисто как метастор ну и для ддл операций. А он каким-то чудом возвращает данные нормальные.
источник

N

Nikita Blagodarnyy in Data Engineers
А в ярне и хистори пусто.
источник

GP

Grigory Pomadchin in Data Engineers
что значит возвращает данные нормальные
источник

GP

Grigory Pomadchin in Data Engineers
как используете то
источник

N

Nikita Blagodarnyy in Data Engineers
ну те, которые на hdfs лежат в hudi. которые я spark.read.format(«hudi»).load(«/path») читаю.
источник

N

Nikita Blagodarnyy in Data Engineers
боевые
источник

GP

Grigory Pomadchin in Data Engineers
а как стартовал spark этот свой
источник