Size: a a a

Архитектура данных

2019 May 27

S

Stanislav in Архитектура данных
Fedor Lavrentyev
Привет! А что за митап?
Пока не делал анонсов. Собираю доклады по указанной тематике.  И к слову,  как дела в такси с dq и mdm?)
источник

FL

Fedor Lavrentyev in Архитектура данных
Скажем так, можно сделать лучше. :)
Мы ещё и денег предлагаем. :)
источник

FL

Fedor Lavrentyev in Архитектура данных
Stanislav
Пока не делал анонсов. Собираю доклады по указанной тематике.  И к слову,  как дела в такси с dq и mdm?)
А кто организатор? На чьей площадке митап? Есть предпочтения по темам?
источник
2019 May 28

NN

Nikita N in Архитектура данных
Stanislav
Всем привет.  Ищу доклады по mdm/dg/dq на митап. Внедрение alation, допиливание атласа тоже подойдет
Могу про mdm/dq
Но я вендора представляю, не вижу смысла это скрывать)
источник

VK

Victoria Krasnova in Архитектура данных
Stanislav
Всем привет.  Ищу доклады по mdm/dg/dq на митап. Внедрение alation, допиливание атласа тоже подойдет
У нас есть что рассказать и по mdm и dq и dg.
Но сначала хочется понять что за митап и что за аудитория. Подготовка всегда трудозатратна. При том что такие темы не всем интересны и нужны.
Делали доклад в Питере в эту субботу по dg на analysts days - вопросы “что это» и «зачем эта фигня нужна».
источник

S

Stanislav in Архитектура данных
Victoria Krasnova
У нас есть что рассказать и по mdm и dq и dg.
Но сначала хочется понять что за митап и что за аудитория. Подготовка всегда трудозатратна. При том что такие темы не всем интересны и нужны.
Делали доклад в Питере в эту субботу по dg на analysts days - вопросы “что это» и «зачем эта фигня нужна».
В питере жизни нет) вернее аудитории) я сам из спб)
источник

IV

Ivan Volovodov in Архитектура данных
Victoria Krasnova
У нас есть что рассказать и по mdm и dq и dg.
Но сначала хочется понять что за митап и что за аудитория. Подготовка всегда трудозатратна. При том что такие темы не всем интересны и нужны.
Делали доклад в Питере в эту субботу по dg на analysts days - вопросы “что это» и «зачем эта фигня нужна».
Доброе утро!
Можете скинуть презентацию доклада? Любопытно)
источник

VK

Victoria Krasnova in Архитектура данных
источник

VS

Vladislav 👻 Shishkov in Архитектура данных
Если честно, так и не увидел в слайдах намек на dq и на dg
источник

VK

Victoria Krasnova in Архитектура данных
Это слайды: их рассказывают а не читают.
Общая концепция следующая. Dg и dq нужны в первую очередь специализированным выделенным аналитикам данных.  Если ты работаешь только с тем что сам считаешь, то ты прекрасно знаешь что это за цифра и когда она правильная.
В Сибур данные не описаны, их много, много легаси. Сотрудников 28.000. Собрать общее описание, определить владельцев, написать проверки - требуется адовый штат. Соответственно решение которое сейчас реализуется - создать для существующих сотрудников школу аналитики, которые в рамках решения своих задач, попутно будут заполнять нам базу над которой строится dg и проверки, которые пуляет sas.
источник

VS

Vladislav 👻 Shishkov in Архитектура данных
Понятно, спасибо за пояснение
источник

VK

Victoria Krasnova in Архитектура данных
Vladislav 👻 Shishkov
Понятно, спасибо за пояснение
Всегда рада )
источник

PG

Paul Golubev in Архитектура данных
Victoria Krasnova
Это слайды: их рассказывают а не читают.
Общая концепция следующая. Dg и dq нужны в первую очередь специализированным выделенным аналитикам данных.  Если ты работаешь только с тем что сам считаешь, то ты прекрасно знаешь что это за цифра и когда она правильная.
В Сибур данные не описаны, их много, много легаси. Сотрудников 28.000. Собрать общее описание, определить владельцев, написать проверки - требуется адовый штат. Соответственно решение которое сейчас реализуется - создать для существующих сотрудников школу аналитики, которые в рамках решения своих задач, попутно будут заполнять нам базу над которой строится dg и проверки, которые пуляет sas.
Хорошее решение, так как даже адовому штату надо будет общаться с теми же людьми. А так и культура работы с данными повысится :)
источник

S

Stanislav in Архитектура данных
Поспорил бы. Это не решение проблемы мдм и дг. И аналитиков тоже надо на чем то обучать. Пока все передается из уст в уста, все плохо. Даже описанное в кф достаточно так себе. Я тут ради интереса глянул в беклог команды билинга, 4 страницы тасок в жире. И все это потом оказывается в аналитической хранилке
источник

S

Stanislav in Архитектура данных
Но как использование бесплатного труда - вполне )
источник

S

Stanislav in Архитектура данных
Ну и в сибуре данных НЕ много )
источник

PG

Paul Golubev in Архитектура данных
Это конечно же, частичное решение. Я рассматриваю это так - при заведении новых данных и новых сервисов люди уже будут думать над тем, чтобы данные хранились удобно для всех, а не только для работы сервиса
источник

PG

Paul Golubev in Архитектура данных
Это часть работы cdo - обеспечить такую культуру
источник

S

Stanislav in Архитектура данных
да, тут согласен. именно для всех )
источник

VS

Vladislav 👻 Shishkov in Архитектура данных
Paul Golubev
Это конечно же, частичное решение. Я рассматриваю это так - при заведении новых данных и новых сервисов люди уже будут думать над тем, чтобы данные хранились удобно для всех, а не только для работы сервиса
Не будут
источник