Size: a a a

2021 October 25

NN

No Name in Airflow
Give us more details, man.
источник

EP

Eugeny Prochan in Airflow
Привет! Кто-то используется cluster policy? Чет пока не могу аргументы для дагов по дефолту поставить, не срабатывает.
источник
2021 October 26

А

Алексей in Airflow
подскажите, что переопределить в TaskGroup, чтобы в унаследованную группу всегда добавлялась 1 таска в самое начало?
источник

А

Алексей in Airflow
источник

SC

Stanislav Chernov in Airflow
Привет!
Скажите, как корректно запустить dag сегодня в 21:30 по UTC ?
Я хочу чтобы у меня старт был в 00:30 мск
Мне кажется вот такое не сработает...
источник

ME

Max Efremov in Airflow
Вроде норм же
источник

ME

Max Efremov in Airflow
30 минут, 21 час
источник

SC

Stanislav Chernov in Airflow
Ну ок... проверим )))
источник

SC

Stanislav Chernov in Airflow
А еще вопрос
#mssql #clickhouse
есть у кого готовый шаблон дага, ну или функции, который может:
1. сделать select * from table внутри mssql
2. сделать insert into table ( * ) внутри clickhouse
источник

SC

Stanislav Chernov in Airflow
Хочу некоторые тесты провести работы clickhouse (Думаю он точно будет лучше) ... но нужно это дело обернуть в python .. ну и раз я на канале по airflow, делать всё это будет он )))
источник

A

Alex in Airflow
я бы проверил, что часовой пояс во всех контейнерах UTC
источник

A

Alex in Airflow
почему бы не подключить mssql базу в clickhouse и внутри него уже делать insert into/select from. вроде он так умеет. и airflow не будет промежуточным звеном
источник

SC

Stanislav Chernov in Airflow
о! а так можно ?
источник

VN

Viacheslav Nefedov in Airflow
Раньше кликзауз в таких случаях целиком выбирал таблицу из базы-источника, не фильтруя. Сейчас это поменялось?
источник

A

Alex in Airflow
собираюсь делать так на postgresql, вроде можно
источник

A

Alex in Airflow
хм, спасибо за инфу, надо будет обратить на это внимание!
источник

SC

Stanislav Chernov in Airflow
А мне так и нужно
источник

SC

Stanislav Chernov in Airflow
А есть ссылки почитать как это вообще сделать?
источник

A

Alex in Airflow
источник

IB

Igor Burobin in Airflow
Можно, с пострес точно) это приятнее чем csv файлы гонять между системами
источник