Size: a a a

Архитектура данных

2020 February 06

DT

Denis Troyan in Архитектура данных
Было бы интересно услышать апдейт!
источник

PD

Phil Delgyado in Архитектура данных
Может к осени, надо еще на прод выйти...
источник

IS

Igor Seliverstov in Архитектура данных
Немного почитал, просто к слову, все перечисленное несколько банков как отечественных так и зарубежных решали на Ignite)
источник

PD

Phil Delgyado in Архитектура данных
Все - это что именно?
источник

PG

Paul Golubev in Архитектура данных
Igor Seliverstov
Немного почитал, просто к слову, все перечисленное несколько банков как отечественных так и зарубежных решали на Ignite)
Вот где почитали и что именно реализовывали, можете ссылку кинуть?
источник

PG

Paul Golubev in Архитектура данных
А так задачи обычно решаются с помощью шин, поддерживающих гарантированные доставки и распределенные транзакции. Etl тоже можно, но оно из коробки имеет меньше требуемого функционала и надо предусматривать вручную. А ещё лучше все делать с асинхронной обратной связью и защитой от дублирования.
источник

PG

Paul Golubev in Архитектура данных
С одной стороны распределенные транзакции зло, с другой - acid. Вот многие и мучаются как сохранить одно и устранить недостатки
источник

IS

Igor Seliverstov in Архитектура данных
Paul Golubev
Вот где почитали и что именно реализовывали, можете ссылку кинуть?
Я про обсуждение выше, в игнате есть месседжинг, можно создавать топики и подписки, на них вещать обработчики, таким образом решали задачу обработки банковских переводов, состояние в кэшах, кэши связаны с бд, обработка на пайплайнах где каждый обработчик слушает топик что-то делает и отправляет в другой
источник

IS

Igor Seliverstov in Архитектура данных
Но как я сказал это просто к слову)
источник
2020 February 07

e

er@essbase.ru in Архитектура данных
#informatica
installation guide :  use oracle oem "free" license

https://www.edureka.co/blog/informatica-installation/
источник

PD

Phil Delgyado in Архитектура данных
Paul Golubev
С одной стороны распределенные транзакции зло, с другой - acid. Вот многие и мучаются как сохранить одно и устранить недостатки
Распределенных транзакций просто не бывает в реальной жизни, особенно с хоть какой-то нагрузкой
источник

PG

Paul Golubev in Архитектура данных
Phil Delgyado
Распределенных транзакций просто не бывает в реальной жизни, особенно с хоть какой-то нагрузкой
Смотря что называть нагрузкой. Во втором банке вижу что они есть и живут тут много лет
источник

PD

Phil Delgyado in Архитектура данных
Ну, хотя бы 1000 TPS ...
источник

PD

Phil Delgyado in Архитектура данных
На вменяемом железе. Понятно, что сбер может залить деньгами любое решение, вне зависимости от его качества.
источник

PD

Phil Delgyado in Архитектура данных
Paul Golubev
Смотря что называть нагрузкой. Во втором банке вижу что они есть и живут тут много лет
А какой протокол распределенных транзакций используют?
источник

e

er@essbase.ru in Архитектура данных
вопрос : что лучше схд на ssd или игнайт?
источник

IS

Igor Seliverstov in Архитектура данных
er@essbase.ru
вопрос : что лучше схд на ssd или игнайт?
Если просто хранить данные, в смысле фильмы в mkv, то естественно схд)
источник

e

er@essbase.ru in Архитектура данных
Igor Seliverstov
Если просто хранить данные, в смысле фильмы в mkv, то естественно схд)
а если хостить файлы бд ?
источник

IS

Igor Seliverstov in Архитектура данных
Нутрянка игнайта заточена на небольшие данные, в идеале чуть меньше 4 килобайт - типичный тайпл в них влазит, чем жирнее тайпл тем больше собственно расходы на манипуляции с ним, в общем то достаточно длинные строки туда ещё хорошо залезают, а вот файлы в сотни мегабайт лучше хранить в другом месте
источник

e

er@essbase.ru in Архитектура данных
вопрос вполне себе простой но требующий нагрузочного тестирования на контрольном объеме данных. есть такое?
источник