Позитивные вещи можно найти даже в связи с коронавирусом: т.к. не все смогли сдать версию SAA -C01 до 23 марта из-за закрытия центров приема экзаменов, было решено продлить срок сдачи до 30 июня.
DAG обработки можно много на чем сделать. Airflow, Luigi. Если про потоковую обработку - Spark, Kafka Streams. Я честно говоря step function не юзал, но вот Airflow под кубом да