ネットワークは切れ、APIはタイムアウトし、データベースは再起動します。再試行は、そうした一時的な問題を、失敗した夜ではなく短い遅れに変えます:@task(retries=2, retry_delay=timedelta(minutes=1))で、タスクに1分の間隔で最大3回の試行を与えます。試行の間、タスクインスタンスはup_for_retry(Gridでは黄色)で、それぞれの試行に独自のログがあります。
retry_exponential_backoff=Trueは、失敗のたびにmax_retry_delayまで待ち時間を2倍にし、苦しんでいるサービスにやさしくなります。すべてのタスクに同じポリシーを与えるには、それをDagのdefault_argsに入れてください:default_args={"retries": 2, "retry_delay": timedelta(minutes=1)}. Airflow自体のデフォルトは、再試行なしです。
決して自然には直らない失敗もあります:拒否されたパスワード、欠けた列、バグです。それを再試行しても、通知が遅れるだけです。(airflow.exceptionsの)AirflowFailExceptionを発生させると、retriesにかかわらず、タスクはすぐに失敗します。