Size: a a a

Архитектура данных

2020 June 15

Н

Николай in Архитектура данных
вы новичёк в хранилищах или в sql?
источник

🅰

🅰️ртур in Архитектура данных
В первом, во втором есть базовые навыки.
источник

Н

Николай in Архитектура данных
понятно. а требования какие к данным ?
источник

🅰

🅰️ртур in Архитектура данных
У меня вообще задача стоит визуализации, а из источников - Google таблица.
источник

МЛ

Максим Лисянский... in Архитектура данных
PowerBI умеет тащить данные из Google таблиц
источник

S

Shadilan R16 MU Rost... in Архитектура данных
Но я так понимаю задача автоматизировать еще и наполнение гугл таблицы?
источник

Н

Николай in Архитектура данных
ну дык визуализируйте. КХД - это довольно ресурсоёмкий проект
источник

SL

Sergey Lukin in Архитектура данных
Google Sheets JDBC/ ODBC Driver - а дальше используй что угодно. но имхо это костыль. и не об архитектуре.
источник

🅰

🅰️ртур in Архитектура данных
Я это понимаю) Что все инструменты BI могут тащить... Задача автоматизировать наполнение в единое хранилище из нескольких подразделений. Не думаю, что Excel и Google таблица лучшая идея.
источник

KO

Konstantin Orzhekhov... in Архитектура данных
🅰️ртур
Я это понимаю) Что все инструменты BI могут тащить... Задача автоматизировать наполнение в единое хранилище из нескольких подразделений. Не думаю, что Excel и Google таблица лучшая идея.
а откуда люди берут данные, которые они в гугл таблицу вставляют?
источник

🅰

🅰️ртур in Архитектура данных
Konstantin Orzhekhovsky
а откуда люди берут данные, которые они в гугл таблицу вставляют?
Это я не уточнял.
источник

🅰

🅰️ртур in Архитектура данных
"Данные в таблицу добавляются вручную путем копирования из разных отчетов (таблицы excel), т.к. начисление ведется в разных программах."
источник

KO

Konstantin Orzhekhov... in Архитектура данных
🅰️ртур
Это я не уточнял.
лучше в зависимости от источника выбирать интеграционный механизм/инструмент
источник

KO

Konstantin Orzhekhov... in Архитектура данных
🅰️ртур
"Данные в таблицу добавляются вручную путем копирования из разных отчетов (таблицы excel), т.к. начисление ведется в разных программах."
можно использовать nifi для чтения различных директорий или excel файлов и дальше складывать эти данные куда захотите, хоть в тот же csv, которые и будете затем визуализировать
источник

🅰

🅰️ртур in Архитектура данных
Konstantin Orzhekhovsky
можно использовать nifi для чтения различных директорий или excel файлов и дальше складывать эти данные куда захотите, хоть в тот же csv, которые и будете затем визуализировать
Apache NiFi?
источник

KO

Konstantin Orzhekhov... in Архитектура данных
🅰️ртур
Apache NiFi?
да
источник

LV

Leonid Vygovskiy in Архитектура данных
Или pentahoo kettle
источник

LV

Leonid Vygovskiy in Архитектура данных
этот класс решений называется etl
источник

🅰

🅰️ртур in Архитектура данных
Спасибо, попробую разобраться.
источник

II

Ilya Ilyin in Архитектура данных
🅰️ртур
Спасибо, попробую разобраться.
Кстати, если потом надо будет "по-простому" делать всякие задачи уровня "пробежаться по гуглтаблице, отобрать значения по условию и отправить их куда-то дальше" - integromat.com имеет простой и приятный коннектор к гуглтаблицам.
источник