Um trabalho conecta tarefas em um grafo dirigido. Uma tarefa de ingestão bronze precisa terminar antes de uma transformação silver que lê a saída dela, e uma tarefa de publicação gold deve esperar as verificações de qualidade necessárias. Configure a regra de dependência além da aresta: uma tarefa que roda depois de uma falha tem um propósito diferente de uma que só roda depois de um sucesso.
As novas tentativas ajudam com falhas temporárias, mas uma tarefa repetida precisa gravar com segurança. Adicionar as mesmas linhas de negócio a cada tentativa pode duplicar um resultado. Uma execução de reparo pode executar de novo as tarefas que falharam e o trabalho posterior afetado, em vez de repetir todas as tarefas anteriores bem-sucedidas. As programações, os gatilhos de chegada de arquivos e os gatilhos de atualização de tabelas se encaixam em padrões de disponibilidade diferentes. Confira a garantia de chegada da origem antes de escolher um horário fixo e dê às ramificações condicionais e aos loops um motivo explícito para serem executados.
Dependa de todas as entradas bem-sucedidas necessárias e confira antes de publicar.