SC
Привет!
А как правильно обновить 2.0.1 на 2.0.2 ?
И есть ли список изменений ?
А как правильно обновить 2.0.1 на 2.0.2 ?
И есть ли список изменений ?
Size: a a a
2021 April 25
SC
список изменений нашёл
K
Не будем изменять традиции ) начало положено. спасибо. будут вопросы вернусь )
2021 April 26
SC
Скажите, а ни у кого не наблюдается проблем с производительностью когда используется много TimeDeltaSensor ?
У меня в одном даге их 31, а всего тасков 127.
Если включаем его - то ппц, моментально load average > 50.0 становится
Через минут 15 сервер оживает, и часть тасков сразу в фэйле, так как CeleryExecutor по таймауту отвалился
У меня в одном даге их 31, а всего тасков 127.
Если включаем его - то ппц, моментально load average > 50.0 становится
Через минут 15 сервер оживает, и часть тасков сразу в фэйле, так как CeleryExecutor по таймауту отвалился
SC
Причём, на rabbit-mq это было ..
Сейчас поменяли на redis - более-менее стал шустрее оживать... за 2-3 минуты
Сейчас поменяли на redis - более-менее стал шустрее оживать... за 2-3 минуты
I
У нас по памяти проседал sensor когда мы поставили ему мод reschedule и не поставили poke_interval, а вместо этого почему то указывали reschedule_interval
R
Подскажите пожалуйста, можно ли заставить эйрфлоу запускать определенные таски в разное время?
К примеру, даг запускается на ежедневной основе, но я хочу, чтобы один из операторов выполнялся только лишь раз в неделю: есть ли возможность прописать schedule_interval для этого оператора отдельно?
К примеру, даг запускается на ежедневной основе, но я хочу, чтобы один из операторов выполнялся только лишь раз в неделю: есть ли возможность прописать schedule_interval для этого оператора отдельно?
AS
Хороший вопрос. Я бы тоже хотел знать на него ответ :)
YV
Нет, ты можешь сделать флаг - если флаг был поставлен меньше чем неделю назад - скипаем таску.
YV
В качестве флага - xcom от этой же таски, например
А
Можно попробовать поковырять через сабдаг, с start и end date https://airflow.apache.org/docs/apache-airflow/stable/concepts.html#subdags
VB
Добрый день,
может кто сталкивался с такой проблемой:
есть airflow в докере, пытаюсь отправить письмо с использованием EmailOperator, в конфиге [smtp] параметры настроены, но при выполнении оператора получаю ошибку ERROR - [Errno 101] Network is unreachable.
Хотя smtp сервер рабочий и с виртуалки, на которой докер с аирфлоу, пингуется.
может кто сталкивался с такой проблемой:
есть airflow в докере, пытаюсь отправить письмо с использованием EmailOperator, в конфиге [smtp] параметры настроены, но при выполнении оператора получаю ошибку ERROR - [Errno 101] Network is unreachable.
Хотя smtp сервер рабочий и с виртуалки, на которой докер с аирфлоу, пингуется.
YV
их никогда нельзя было запускать по расписанию отличному от основного ДАГа
YV
хотя может что-то поменялось с 1.10.3, я давно их использовала
ME
а телнетится?