Cada tentativa de cada instância de tarefa tem um log. No Grid, clique em um quadrado e abra Logs: o Airflow registra quando a tentativa começou, qual tentativa é, o que a tarefa devolveu e, se ela falhar, o traceback completo do Python. Leia um traceback de baixo para cima: a última linha é a exceção, e a de cima é o seu código que a lançou.
Tudo o que a sua tarefa imprime ou envia pelo módulo logging do Python vai parar no mesmo log, então você pode deixar registrado o que uma tarefa fez:
import logging
log = logging.getLogger(__name__)
log.info("Loaded %s rows for %s", len(rows), ds)
As mensagens de nível INFO e acima são mantidas; DEBUG fica oculto por padrão. Os logs são para pessoas. Para passar um valor a outra tarefa, devolva-o.
O log também mostra as novas tentativas: "Starting attempt 2 of 3" significa que a primeira tentativa falhou e que a tarefa tem três no total.
A última linha nomeia a exceção; a de cima é o código que a lançou.