Um callback é uma função que o Airflow chama quando uma instância de tarefa muda de estado: on_failure_callback quando a última tentativa falha, on_retry_callback quando uma tentativa falha e há uma nova tentativa prevista, on_success_callback e on_skipped_callback. A função recebe o contexto da execução, o mesmo dict que as tarefas recebem, então pode ler context["ti"].task_id, context["ds"] e, nas falhas, context["exception"].
def alert(context):
chat.post("#data-alerts", f"{context['ti'].task_id} failed: {context['exception']}")
@task(on_failure_callback=alert)
Você pode definir callbacks em uma tarefa, em default_args para todas as tarefas ou no próprio Dag (@dag(on_failure_callback=...)), onde são executados uma vez quando a execução falha. Os erros dentro de um callback são gravados no log e nunca mudam o estado da tarefa, então teste-os. Os notifiers dos providers, como Slack ou e-mail, são callbacks que você configura em vez de escrever. Neste espaço de trabalho, chat.post faz as vezes de um webhook de chat; as mensagens dele aparecem em Dags.
O callback recebe o contexto da instância de tarefa que falhou, incluindo a exceção.