Size: a a a

2019 August 07

AZ

Anton Zadorozhniy in Data Engineers
Eldar Nezametdinov
О, спасибо.
пожалуйста, а в отношении производительности - вам нужно чтобы у вас было достаточное количество воркеров и сплитов таблицы
источник

Ж

Жмака in Data Engineers
Как правильно запустить джоб в oozie через curl? Все время получаю ошибку 401🤦🏻‍♂️ кербероса нет. Simple authentication
источник

РА

Рамиль Ахмадеев in Data Engineers
там наверняка какой нибудь proxy user не корректно настроен
источник

PA

Polina Azarova in Data Engineers
или вообще в курле не указан
источник

PA

Polina Azarova in Data Engineers
а на стороне узи в логах есть что-то?
может там написано что пароль не тот
или что пользователь не пользователь
источник

Ж

Жмака in Data Engineers
В body прописал xml в котором указан юзер hdfs. В логах пишет "User [?] not authorized..."
источник

Ж

Жмака in Data Engineers
Джоб создан через юзер hdfs
источник

EN

Eldar Nezametdinov in Data Engineers
Proxy user для узи указан?
В hdfs?
источник

VS

Vladislav 👻 Shishkov in Data Engineers
Жмака
В body прописал xml в котором указан юзер hdfs. В логах пишет "User [?] not authorized..."
А там случаем не basic auth метод?
источник

Ж

Жмака in Data Engineers
Там simple
источник

Ж

Жмака in Data Engineers
Eldar Nezametdinov
Proxy user для узи указан?
В hdfs?
Нет такой настройки у меня
источник

Ж

Жмака in Data Engineers
Записал только hdfs в  oozie_admin_users
источник

VS

Vladislav 👻 Shishkov in Data Engineers
Жмака
Там simple
Все равно не понял, почему xml
источник

VS

Vladislav 👻 Shishkov in Data Engineers
Первый раз слышу про авторизацию через xml
источник

Ж

Жмака in Data Engineers
Я через Postman посылаю GET и в body записал content type application xml. Xml содержит указание на пользователя, нэймнод, где находится сам xml  джоб
источник

РА

Рамиль Ахмадеев in Data Engineers
там есть опция doas
источник

РА

Рамиль Ахмадеев in Data Engineers
или как то так
источник

РА

Рамиль Ахмадеев in Data Engineers
и еще надо разрешить пользаку из под  которого запускаешь проксировать пользователя hdfs
источник

Ж

Жмака in Data Engineers
Я добавил &user.name=hdfs как в доках по web hdfs api Сработало
источник

Ж

Жмака in Data Engineers
Рамиль Ахмадеев
и еще надо разрешить пользаку из под  которого запускаешь проксировать пользователя hdfs
Это в custom core-site прописано как proxyuser.groups=*. Так?
источник