Size: a a a

2021 March 05

MC

Makha Cloud in Qlik BI chat
источник

IB

Igor Burobin in Qlik BI chat
Makha Cloud
Это решение коробочное, для 2-3 источников
Если есть какое то нормальное сравнение - пришлите пожалуйста
источник

MC

Makha Cloud in Qlik BI chat
Igor Burobin
Если есть какое то нормальное сравнение - пришлите пожалуйста
Ну если полноценный ETL нужен, то airflow
источник

IB

Igor Burobin in Qlik BI chat
опять это слово)
источник

MC

Makha Cloud in Qlik BI chat
Igor Burobin
опять это слово)
Чем платить за ms analytics services
источник

MC

Makha Cloud in Qlik BI chat
Бесплатно, главное ручки))
источник

IB

Igor Burobin in Qlik BI chat
а есть пример где большие данные обрабатываются на airflow? какие нибудь логи которые по 10Гб в сутки прибывают. Он поддерживает кластеризацию? Массово-параллельную обработку?
источник

ei

evgeny ivanov in Qlik BI chat
airflow - не поддерживает streaming, остальное то как Вы напишите
источник

IB

Igor Burobin in Qlik BI chat
evgeny ivanov
airflow - не поддерживает streaming, остальное то как Вы напишите
Ну я думаю что это и не нужно, это больше для шин актуально. А тут только батчи 😊
источник

ei

evgeny ivanov in Qlik BI chat
по сути airflow - это запуск, каких-то task-ов последовательно,паралельно/условно (как захотите)  в соответствии с workflow
источник

MD

Maxim Deviatov in Qlik BI chat
evgeny ivanov
по сути airflow - это запуск, каких-то task-ов последовательно,паралельно/условно (как захотите)  в соответствии с workflow
Насколько быстро/легко с ним разобраться?
источник

MC

Makha Cloud in Qlik BI chat
Maxim Deviatov
Насколько быстро/легко с ним разобраться?
Пару видосов на ютьюбе))
источник

ei

evgeny ivanov in Qlik BI chat
если знаете linux/python - легко
источник

MD

Maxim Deviatov in Qlik BI chat
evgeny ivanov
если знаете linux/python - легко
вообще радует
источник

V

Valera in Qlik BI chat
Евгений Стучалкин
началось в колхозе утро)
Скажите, пожалуйста, а сет анализ в скрипте загрузки работает же?
источник

MC

Makha Cloud in Qlik BI chat
Igor Burobin
а есть пример где большие данные обрабатываются на airflow? какие нибудь логи которые по 10Гб в сутки прибывают. Он поддерживает кластеризацию? Массово-параллельную обработку?
Пример -air bnb ,которые его создали
источник

ЕС

Евгений Стучалкин... in Qlik BI chat
Valera
Скажите, пожалуйста, а сет анализ в скрипте загрузки работает же?
нет, с чего бы?)
источник

ИС

Игорь Степанов... in Qlik BI chat
Igor Burobin
а есть пример где большие данные обрабатываются на airflow? какие нибудь логи которые по 10Гб в сутки прибывают. Он поддерживает кластеризацию? Массово-параллельную обработку?
в циан используют Luigi (это как Airflow, но на уровень вниз),..."войти" легче.
источник

V

Valera in Qlik BI chat
Евгений Стучалкин
нет, с чего бы?)
Эээ, а вот когда в let передают переменные с сет анализом?
источник

MD

Maxim Deviatov in Qlik BI chat
да про луиджи много слышал хорошего
источник