Un callback es una función que Airflow llama cuando una instancia de tarea cambia de estado: on_failure_callback cuando falla el último intento, on_retry_callback cuando falla un intento y hay un reintento previsto, on_success_callback y on_skipped_callback. La función recibe el contexto de la ejecución, el mismo dict que reciben las tareas, así que puede leer context["ti"].task_id, context["ds"] y, en los fallos, context["exception"].
def alert(context):
chat.post("#data-alerts", f"{context['ti'].task_id} failed: {context['exception']}")
@task(on_failure_callback=alert)
Puedes poner los callbacks en una tarea, en default_args para todas las tareas o en el propio Dag (@dag(on_failure_callback=...)), donde se ejecutan una vez cuando falla la ejecución. Los errores dentro de un callback se registran en el log y nunca cambian el estado de la tarea, así que pruébalos. Los notifiers de los providers, como Slack o el correo, son callbacks que configuras en lugar de escribirlos. En este espacio de trabajo chat.post hace de webhook de chat; sus mensajes aparecen en Dags.
El callback recibe el contexto de la instancia de tarea que falló, incluida la excepción.