Size: a a a

Архитектура Digital сервисов

2017 August 10

I

Igor in Архитектура Digital сервисов
Приложение с красивым Dashbord с состоянием и нагрузкой базы есть?
источник

I

Igor in Архитектура Digital сервисов
Поддержка java в хранимках?
источник

VT

Vladimir Tolmachev in Архитектура Digital сервисов
kuznetsovin
А вот допустим можно ли заюзать тарантул для сбора телеметрии с транспорта, если в тарантул внешний сервис данные будет класть. А из него по апи дергать прошедшие точки.
Да, совсем недавно этот сценарий внутри обсуждали.
Можно сделать и API для залива данных, гео индексы есть, resp API для доступа тоже есть.
источник

NK

ID:300769066 in Архитектура Digital сервисов
Как эффективнее в тарантул положить данные из внешнего источника, скажем, transact-sql? у вас в документации ссылки только на mysql и postgre.. только через сервис-прослойку? допустим, загрузка этих данных не является критичным по скорости параметром
источник

DA

Dennis Anikin in Архитектура Digital сервисов
ID:300769066
Как эффективнее в тарантул положить данные из внешнего источника, скажем, transact-sql? у вас в документации ссылки только на mysql и postgre.. только через сервис-прослойку? допустим, загрузка этих данных не является критичным по скорости параметром
Есть несколько вариантов - Golden Gate, Informatica, через триггеры. С Informatica мы в партнерстве - можем сделать совместный проект вам.
источник

VT

Vladimir Tolmachev in Архитектура Digital сервисов
ID:300769066
Как эффективнее в тарантул положить данные из внешнего источника, скажем, transact-sql? у вас в документации ссылки только на mysql и postgre.. только через сервис-прослойку? допустим, загрузка этих данных не является критичным по скорости параметром
T-sql это ж мс? Там есть интерфейс CDC, через который можно сделать репликацию по событиям
источник

ST

Sergey Tarbeev in Архитектура Digital сервисов
Коллеги, привет.  Интересует задача фин. мониторинга. Есть готовые проекты?
источник

DA

Dennis Anikin in Архитектура Digital сервисов
Сергей, а можете чуть детальней? Надо в онлайне отделять плохие операции от хороших?
источник

ST

Sergey Tarbeev in Архитектура Digital сервисов
Да, примерно так. Логика может быть сложнее, но суть такая.
источник

ST

Sergey Tarbeev in Архитектура Digital сервисов
Классический пример - анализ операций юр. лиц
источник

ST

Sergey Tarbeev in Архитектура Digital сервисов
противодействие отмыванию
источник

NK

ID:300769066 in Архитектура Digital сервисов
Vladimir Tolmachev
T-sql это ж мс? Там есть интерфейс CDC, через который можно сделать репликацию по событиям
да, мс. да, есть поддержка отслеживания изменений. но я имел в виду скорее разовую (bulk) заливку сырых данных, чтобы на основе них пытаться строить аналоги кубов для bi в tarantool. сейчас стоит такая задача в приоритете, скорость работы текущего механизма неудовлетворительная при сравнительно малом количестве пользователей.
ищем варианты...

даже так, как строится собственно сам импорт? :)
на картинках это всегда красивые стрелочки с дата стримами "из/в". есть ли ссылки где можно почитать?
общая суть, конечно, ясна. но наверняка же это не самый нетипичный случай...

про golden gate/informatica - спасибо, поизучаю. пока в поиске возможных вариантов решений.

спасибо!
источник

VT

Vladimir Tolmachev in Архитектура Digital сервисов
ID:300769066
да, мс. да, есть поддержка отслеживания изменений. но я имел в виду скорее разовую (bulk) заливку сырых данных, чтобы на основе них пытаться строить аналоги кубов для bi в tarantool. сейчас стоит такая задача в приоритете, скорость работы текущего механизма неудовлетворительная при сравнительно малом количестве пользователей.
ищем варианты...

даже так, как строится собственно сам импорт? :)
на картинках это всегда красивые стрелочки с дата стримами "из/в". есть ли ссылки где можно почитать?
общая суть, конечно, ясна. но наверняка же это не самый нетипичный случай...

про golden gate/informatica - спасибо, поизучаю. пока в поиске возможных вариантов решений.

спасибо!
Надо с другой стороны начать, посмотреть на структуру данных и запросы. Тарантул хорошо на оперативную отчётность, а вот с глубокой аналитикой могут быть вопросы. Те тут первична не репликация а структура нагрузки. С репликацией так или иначе вопрос можно решить, тем более в случае с мс.
источник

S

Sid in Архитектура Digital сервисов
Аналитику лучше в хадут или субд какой нибудь
источник

NK

ID:300769066 in Архитектура Digital сервисов
Sid
Аналитику лучше в хадут или субд какой нибудь
а пользователю с учетом привилегий как раз предрасчет и показать ))
источник

NK

ID:300769066 in Архитектура Digital сервисов
упс, не туда  прошу прощения
источник

S

Sid in Архитектура Digital сервисов
Сложную логику на тарантуле геморно делать, или не удобно
источник

S

Sid in Архитектура Digital сервисов
И не факт что в итоге будет быстрее  скуль запроса
источник

DA

Dennis Anikin in Архитектура Digital сервисов
Sergey Tarbeev
Да, примерно так. Логика может быть сложнее, но суть такая.
Известных нам кейсов нет. Но Тарантул должен быть тут очень полезен. На каждую транзакцию можно в Тарантуле проводить сложную логику, проверяющую допустимость этой транзакции - и все это будет делаться доли секунды. Данные при этом, необходимые для проверки, все можно держать прямо в Тарантуле, и там же их обновлять
источник

BS

Bob Strike in Архитектура Digital сервисов
Очень ждем показанных презентаций =)
источник