A pessoa responsável pelo relatório pergunta se a engenharia de analytics ou as operações de ingestão devem investigar primeiro. Crie cinco consultas de evidência e depois escolha uma ação com base no log de carga fornecido. Entregue as evidências sem alterar os registros originais.
O relatório matinal da Harbor Cart parece desatualizado. Os registros de pedidos originais incluem timestamps de negócio e de atualização, enquanto os registros de eventos do Pulse Path incluem timestamps de chegada.
Sua primeira tarefa é inspecionar as evidências sem afirmar que todo atraso é culpa do dbt. Uma transformação bem-sucedida pode reproduzir fielmente dados de origem desatualizados.
Monte um pequeno pacote de evidências do incidente no mesmo projeto. Separe os timestamps ausentes da ordem dos timestamps, conte os registros que você consegue inspecionar e preserve os valores máximos reais. Você vai terminar com uma decisão de responsabilidade verificada, baseada em um log de execução informado.
A recomendação final precisa seguir esse log; um timestamp de evento atrasado, por si só, não prova uma carga atrasada. Evite substituir timestamps ausentes pela hora atual, porque isso faz uma carga desconhecida parecer recente.
Um padrão resolvido com registros fictícios. Adapte o nome do modelo e a regra de negócio a cada tarefa.