ПФ
Пускай в бд правят
Size: a a a
2021 August 08
ПФ
Получится тот же Авро реджистри но для чего угодно
G
Согласен. Идея именно такая. Просто я думал что есть уже какой то готовый инструмент
G
Не авро 🙂
G
А вот Apache Atlas я краем уха слышал что то такое может
G
Я не видел его ни разу живьем. и что за зверь но мне казалось что это такой какраз инструмент
ПФ
Очень оверкилл
ПФ
И он страшный
G
Ну да. Согласен. Потому пока не копал в эту сторону. Думал есть что то уже готовое и как я писал - попроще
G
В общем. Закатываем рукава и пишем собственный framework
AS
@hachhll а можешь чуть раскрыть кейс? у нас вот тоже аналитики, но они умеют править схемы через git, в остальном всё просто и однообразно. Какую проблему вы решаете, что вот прям нужен какой-то фреймворк или ещё чего?
G
Git не проблема. И аналитики у нас если и не умеют то научить не сложно. Но далее идет процесс ci/cd
И он не простой. Разбит на несколько этапов и каждый требует согласования. То есть это не то что взял закомитил и пошло в Пром
И он не простой. Разбит на несколько этапов и каждый требует согласования. То есть это не то что взял закомитил и пошло в Пром
G
А кейс такой.
Изминился аттрибут в источнике - меняем в интерфейсе и он применяется в схеме чтения данных паркета
Изминился аттрибут в источнике - меняем в интерфейсе и он применяется в схеме чтения данных паркета
G
Или даже так - требуем от тех аналитиков кто отвечает за источники менять аттрибуты и у нас и все. Мы читаем данные паркета с актуальными схемами. Причем тут еще и история изменений аттрибутов крайне важна а потому простой комит в git - плохое решение
D
у нас json который maven подбирает при сборке проекта и генерит классы схем, которыми код читает и пишет
G
Ну это на уровне сборки проекта. А потом. Что то поменялось в проме.
G
У нас часто бывает что мы актуальные данные только в проме и имеем
D
wtf пром ?
NN
Так прод в Сбере кличут
D
ну они же не могут взять и поменяться без вашего благословления. по любому тесты прогнать ... хотя если это сбер и не прод :)