Size: a a a

2021 January 11

СХ

Старый Хрыч... in Data Engineers
Pavel
нее, отказались от него слава богу))
ну тогда смело переезжайте
источник

СХ

Старый Хрыч... in Data Engineers
надо только понимать, что работать он будет меделенее чем вне куба
источник

P

Pavel in Data Engineers
Старый Хрыч
надо только понимать, что работать он будет меделенее чем вне куба
ну, то что оверхеды на кубовые издержки это да
источник

СХ

Старый Хрыч... in Data Engineers
Pavel
ну, то что оверхеды на кубовые издержки это да
куб умеет не все лимиты и настройки ядра
источник

P

Pavel in Data Engineers
Старый Хрыч
куб умеет не все лимиты и настройки ядра
ок. понял. спасибо)
источник

RS

Ravil Sagatdinov in Data Engineers
Переслано от Ravil Sagatdinov
всем привет, подскажите в какую сторону копать. Поставил HDP sandbox версии 2.5, при входе в веб интерфейс вижу что у меня от сервисов нет heartbeat сигналов(скрин1) при попытке перезапустить сервис, он у меня не перезапускается и состояние таска "aborted" (скрин2). Ставлю у себя на локальной виртуалке VMWare
источник

RS

Ravil Sagatdinov in Data Engineers
Переслано от Ravil Sagatdinov
скрин1
источник

RS

Ravil Sagatdinov in Data Engineers
Переслано от Ravil Sagatdinov
скрин2
источник

N

Nikita Blagodarnyy in Data Engineers
фаервол/антивирус ?
источник

RS

Ravil Sagatdinov in Data Engineers
Nikita Blagodarnyy
фаервол/антивирус ?
разрешения прописаны, даже пробовал выключать. Результат тот же
источник

AS

Andrey Smirnov in Data Engineers
Ravil Sagatdinov
разрешения прописаны, даже пробовал выключать. Результат тот же
ну а что в логах самого хадупа/ярна? он сам по себе рабочий?
источник

RS

Ravil Sagatdinov in Data Engineers
Andrey Smirnov
ну а что в логах самого хадупа/ярна? он сам по себе рабочий?
на сам SSH терминал попасть не могу(хотел там посмотреть), не принимает дефолтные пароли, пробовал admin/admin и maria_dev/maria_dev . Видимо там другое что-то. Буду рад подсказке
источник

А

Алексей in Data Engineers
щелкни вглубь операции, там будет подробный лог
источник

M

Mi in Data Engineers
Господа и дамы, есть ли в Airflow аналог Oozie Input Path? Уверен что есть просто нужна подсказка как это называется, другими словами нужно стартовать джобу/ждать внутри джобы появления файлика где-нибудь на s3
источник

DZ

Dmitry Zuev in Data Engineers
HdfsSensor
источник

DZ

Dmitry Zuev in Data Engineers
или *Sensor
источник

DZ

Dmitry Zuev in Data Engineers
источник

DZ

Dmitry Zuev in Data Engineers
вот такая глина
источник

DZ

Dmitry Zuev in Data Engineers
то?
источник
2021 January 12

JP

Jerome Paredes in Data Engineers
maybe just os.chdir?
источник