DK
Геннадий, а какие еще инициативы есть?
Size: a a a
2020 April 23
GK
Геннадий, а какие еще инициативы есть?
Локальные в рамках ведомственных решений
LV
Понял, спасибо.
GK
У инициатив по качеству данных есть одно препятствие - должен быть power sponsor. Чтобы найти и вдохновить спонсора, нужны впечатляющие факты
AG
Есть такая идея - служба тестирования данных (аналог тестирования ПО), KPI которой - количество найденных ошибок в данных. Потому что исполнители (как и разработчики ПО) не сильно заинтересованы повышать качество
GM
Однако)) интересно, на чьей стороне косяк - ФНС или ФГИСа. Могли при миграции как раз накосячить, фгис как раз вводили в это время.
при миграции что угодно могло произойти в целом, но тут надо понимать что таких манипуляций с данными не производилось, возможно ошибка возникла в дальнейшем при обработке новой системой.
Хотя опять же надо понимать какой это регион и в какое время было, может это из легаси систем данные были вообще на тот момент
Хотя опять же надо понимать какой это регион и в какое время было, может это из легаси систем данные были вообще на тот момент
GM
хотя сами по себе данные в старой системе это отдельная тема, там очень много косяков
GK
Alex Glazunov
Есть такая идея - служба тестирования данных (аналог тестирования ПО), KPI которой - количество найденных ошибок в данных. Потому что исполнители (как и разработчики ПО) не сильно заинтересованы повышать качество
Этим и начинают заниматься в локальных решениях. Вопрос, что делать дальше, учитывая особенности межведомственного взаимодействия.
DK
Alex Glazunov
Есть такая идея - служба тестирования данных (аналог тестирования ПО), KPI которой - количество найденных ошибок в данных. Потому что исполнители (как и разработчики ПО) не сильно заинтересованы повышать качество
А как вы глобально оцените качество данных? Ведь оно под каждую систему свое.
DK
Под каждый кейс нужно детальное понимание, какие данные ок, какие не ок и почему.
GK
А дальше, как и при внедрении хранилищ и озёр данных, есть всего два варианта - должен быть кто-то "сверху", кто примет решение работать над качеством или закрыть на это глаза. Чаще всего - второй вариант.
GK
Под каждый кейс нужно детальное понимание, какие данные ок, какие не ок и почему.
К вам в систему приходят данные извне и вы по каждому кейсу можете оценить качество в рамках доступной вам информации.
DK
Этим и начинают заниматься в локальных решениях. Вопрос, что делать дальше, учитывая особенности межведомственного взаимодействия.
Какой-нибудь ЕСОВД получится. Единая система обработки ведомственных данных
F
А разве данные не должны пройти валидацию ПЕРЕД выгрузкой? После тоже, но после, проверяется другое, ошибки транзакций, cоотвествие с внутренними данными
AG
А как вы глобально оцените качество данных? Ведь оно под каждую систему свое.
Не надо глобально, баги в системах тоже не глобально ищут, а по одному. Глобальные решения принимаются, когда поток единичных ошибок велик
GK
Наблюдал такой феномен, после внедрения озера данных его хотели быстренько похоронить, потому что были шокированы качеством данных. Не помню как это точно называется, по-моему кривая обучаемости при внедрении хранилищ, когда в какой-то момент расстаются с иллюзиями по части качества данных
DK
Это в принципе достаточно забавная штука, когда внедрение определенных методик/решений делает ряд проблем настолько очевидными, что проще списать их на недостатки этой методики/решения, чем признать их наличие и что-то с этим делать.
GK
Это в принципе достаточно забавная штука, когда внедрение определенных методик/решений делает ряд проблем настолько очевидными, что проще списать их на недостатки этой методики/решения, чем признать их наличие и что-то с этим делать.
Да, забавно. Технарям это не нравится, мы ведь за всё хорошее
A
Это в принципе достаточно забавная штука, когда внедрение определенных методик/решений делает ряд проблем настолько очевидными, что проще списать их на недостатки этой методики/решения, чем признать их наличие и что-то с этим делать.
Я 1С постоянно так внедрял😂
GK
А разве данные не должны пройти валидацию ПЕРЕД выгрузкой? После тоже, но после, проверяется другое, ошибки транзакций, cоотвествие с внутренними данными
Валидация позволяет выявить только ряд проблем и то часто технических. Она говорит больше о качестве выгрузки, чем от качестве данных