Size: a a a

2019 September 25

N

Nikita Blagodarnyy in Data Engineers
А вот генерация скаласпарка из кубиков вообще днище
источник

YI

Yukari I in Data Engineers
Nikita Blagodarnyy
Ну она тупо не работает в 70% кейсов.
Я бы поспорил, но выслушаю примеры, что именно не работает и почему
источник

N

Nikita Blagodarnyy in Data Engineers
А вы не из дис групп?
источник

YI

Yukari I in Data Engineers
Nikita Blagodarnyy
А вы не из дис групп?
Нет, я не из диса
источник

YI

Yukari I in Data Engineers
Nikita Blagodarnyy
А вы не из дис групп?
Если в инфе что то не работает, следует почитать кб, вероятнее всего это баг и на этот баг есть фикс)
источник

YI

Yukari I in Data Engineers
И обращаться за консультацией лучше сразу к индусам. Дис и индусы мыслят сильно разно, у индусов инфы больше)
источник

N

Nikita Blagodarnyy in Data Engineers
Не работает, например, такая полезная вещь, как выгрузка из рдбмс в hive в спарк режиме.
источник

N

Nikita Blagodarnyy in Data Engineers
Не работают заявленные регулярные выражения в workflow
источник

N

Nikita Blagodarnyy in Data Engineers
Не работает запись в комплекс файл в hdfs
источник

N

Nikita Blagodarnyy in Data Engineers
Не работает http api
источник

N

Nikita Blagodarnyy in Data Engineers
Через жопу работает переполучение тикетов kerberos
источник

YI

Yukari I in Data Engineers
Nikita Blagodarnyy
Не работает, например, такая полезная вещь, как выгрузка из рдбмс в hive в спарк режиме.
А должно? Я про кастомный маппинг, например.
источник

YI

Yukari I in Data Engineers
Nikita Blagodarnyy
Через жопу работает переполучение тикетов kerberos
Вот тут вы правы. Хотя может уже поправили, надо поискать
источник

N

Nikita Blagodarnyy in Data Engineers
Это только то что на память приходит и подтверждено вендором.
источник

N

Nikita Blagodarnyy in Data Engineers
Yukari I
А должно? Я про кастомный маппинг, например.
Должна ли в хадуп етл средстве за охулиард денег работать загрузка данных в хадуп? Ну я хз, это больше философский вопрос.
источник

YI

Yukari I in Data Engineers
Nikita Blagodarnyy
Это только то что на память приходит и подтверждено вендором.
Таки не бывает серебрянной пули. Инфу хоть поддерживают более менее сносно. К тому же, ее основная задача это оркестрация, а не свистелки. Конечно, раз есть должно работать, но ведь у самих вендоров зачастую бывают проблемы со своими же продуктами)
источник

N

Nikita Blagodarnyy in Data Engineers
Yukari I
И обращаться за консультацией лучше сразу к индусам. Дис и индусы мыслят сильно разно, у индусов инфы больше)
Отчасти да, но для этого надо доказать местным, что ты не верблюд и что регулярное выражение-регулярное, а не просто выражение.
источник
2019 September 26

N

Nikita Blagodarnyy in Data Engineers
Yukari I
Таки не бывает серебрянной пули. Инфу хоть поддерживают более менее сносно. К тому же, ее основная задача это оркестрация, а не свистелки. Конечно, раз есть должно работать, но ведь у самих вендоров зачастую бывают проблемы со своими же продуктами)
Не могу согласиться, что основная задача етл средства - это оркестрация. Но и её нормальной нету. В power center вы можете запустить даг с заданного места, в бдм-нет. Как следствие, хоть сколько нибудь длинные даги строить невозможно.
источник

N

Nikita Blagodarnyy in Data Engineers
Ну и приятные ништяки в виде зелёного успешного дага, когда все его вертексы красные и зафейлены.
источник

Д

Дмитрий in Data Engineers
Nikita Blagodarnyy
Ну и приятные ништяки в виде зелёного успешного дага, когда все его вертексы красные и зафейлены.
Ты просто не умеешь его готовить, если правильно все сделать, то все красненькое как надо.
источник