Size: a a a

2019 August 16

АЖ

Андрей Жуков in Data Engineers
Anton Zadorozhniy
позабавил момент с minio, архитектор в команде явно "не боится новых вызовов", как учат говорит на курсах повышения толерантности)
Дык епт :)
источник

АЖ

Андрей Жуков in Data Engineers
Мы уже скоро 03 вызывать будем
источник

СХ

Старый Хрыч in Data Engineers
Grigory Pomadchin
с ним все хорошо, он просто старый некрасивый и нужно редаткировать хмльки.
не обязательно, https://github.com/takari/polyglot-maven, и юзай yaml
источник

AZ

Anton Zadorozhniy in Data Engineers
да это наброс был, понятно что хмл со схемой намного проще в какой-нибудь IDE редактировать
источник
2019 August 17

ДД

Дмитрий Демитов in Data Engineers
подскажите пожалуйста, а то может сталкивался кто. Тестовый кластер на одной машине, настроил Kerberos, все запустилось, настроил одностороннее доверие с доменом и если получаю билет, то hdfs dfs в консоли пускает и все хорошо, но вот не пускает на вэб морды совсем с одной и той же ошибкой
источник

ДД

Дмитрий Демитов in Data Engineers
HDP 3.1.0
источник

t

tenKe in Data Engineers
в браузере надо настроить чтобы тикет пробрасывался
источник

t

tenKe in Data Engineers
источник

t

tenKe in Data Engineers
примерно так
источник
2019 August 19

C

Combot in Data Engineers
Edward 🇳 🇦 ⓣ 🇮‌🔊 has been banned! Reason: CAS ban.
источник

EN

Eldar Nezametdinov in Data Engineers
Инженеры.
Подскажите как поставить узи 5 на hdp?
В /bin/ нет вообще файлов`/bin/oozie-setup.sh` и нет /bin/oozied.sh.
Я погуглил, оказываются такие только в дистре узи для клаудеры есть...
Как устанавливать нативную? Или можно установить cdh билд узи на обычный хдп и все зайдет?
источник

AS

Andrey Star in Data Engineers
Всем привет!
Кто-нибудь знает способ прочитать паркет питоном без использования Pandas, Pyarrow, Fastparquet? Желательно чисто питоновскими либами без с-зависимостей...
источник

CO

Chern Oleksander in Data Engineers
Всем привет, помогите с простой задачкой, мне нужно получить дату в формате дд/мм/гггг чч:ММ:сс
select to_char(now() AT TIME ZONE 'Europe/Helsinki','dd/mm/yyyy HH:MM:SS')
но это в тексте, а нужно дату
чет совсем запутался((
заранее благодарен!
источник

VS

Vladislav 👻 Shishkov in Data Engineers
Формат должен быть
источник

АЖ

Андрей Жуков in Data Engineers
Andrey Star
Всем привет!
Кто-нибудь знает способ прочитать паркет питоном без использования Pandas, Pyarrow, Fastparquet? Желательно чисто питоновскими либами без с-зависимостей...
нет такого способа
источник

AS

Andrey Star in Data Engineers
Андрей Жуков
нет такого способа
Вот и я не знаю ((
источник

АЖ

Андрей Жуков in Data Engineers
Andrey Star
Вот и я не знаю ((
ну нет таких способов, пока пиэрроу не входит в стандартную поставку
источник

АЖ

Андрей Жуков in Data Engineers
А главное - в чем проблема поставить?
источник

AS

Andrey Star in Data Engineers
Андрей Жуков
А главное - в чем проблема поставить?
скриптик в итоге будет запускаться не в нормальном окружении, а в сильно урезанном, куда просто так доставить в site-packages либ не есть просто и несет за собой в дальнейшем извечную проблему с импортами..
источник

АЖ

Андрей Жуков in Data Engineers
собрать пейтону судок с энвом с собой?
источник