Всем привет! Кто-то работал с SAP данными через OData? (Hana, BW)  Можно ли эффективно экстрактить данные через неё?

потому что это либо hosted jenkins, либо какое-то переусложнённое низкоуровневое говно, в котором надо долго и муторно разбираться :(

и в 99% случаев раннер (или екзекутор) (или агент) гоняется в докере, с которым всегда возникает дополнительная морока

Более менее адекватный подход у гитлаб 😬

Хотя последние их тенденции тоже спорные, закручевание на энтерпрайз и облака

Добрый день, господа.

Пытаюсь разобраться с oozie в Hortonworks hdp 2.6.5. При попытке запустить простую Spark джобу с записью в Hive подвисает, и не отпускает. В логах Ярна вижу 2 запущенных контейнера, одну от Оззи(mapreduce в статусе running), вторую от спарка(SPARK  в статусе running)

Лог моего приложения
Initial job has not accepted any resources; check your cluster UI to ensure that workers are registered and have sufficient resources

Буду рад любой информации.

Надо в логи resource manager смотреть, выглядит так что мало ресурсов в yarn для запуска

Это логи Yarn

github actions?

он попроще, мне очень нравится Azure Pipelines (он может где угодно билды и тесты запускать, у нас на AWS гоняет)

у вас видимо один контейнер - узи, один - драйвер спарка, а на экзекьютор спарка уже не хватило ресурсов. вот и висит. вам минимум 3 контейнера нужно

Спасибо, за ответы. А количество контейнеров увеличивать в самом ярне, или в oozie сконфигурировать ярн? Простите за нубство))

я уже выше кручинился по поводу цены. заказчик платит за ec2 cpu time, но не готов платить за дополнительный софт

сколько у вас ядер на вашей машинке?

У меня 4 ядра, 8 потоков. Но я развернул в докере HDP)

Это ноутбук)

ужас какой, этож получается весь облачный прогресс мимо вас?

Памяти 32 гб

зайдите в веб-морду ярна и пришлите скрин оттуда