Harbor Supply tiene cargas de trabajo sin relación que comparten una plataforma de ingesta. Las correcciones de existencias del almacén llegan en archivos, la telemetría de reparto llega de forma continua y Finanzas cierra un libro diario. Debes elegir cada ruta según su plazo indicado en lugar de aplicar una misma arquitectura en todas partes. Estas tareas reutilizan las habilidades de la unidad de pipelines con datos nuevos.
Separa la aritmética de la decisión de diseño. Una programación cada cinco minutos puede incumplir una promesa de frescura de cinco minutos cuando se incluyen la transferencia y el cálculo. Un procesador rápido también puede necesitar horas para recuperarse si su capacidad apenas supera la tasa de llegada. En las tareas de modelado, describe la unidad que representa una fila antes de contarla. Las últimas tareas vuelven a la entrada duplicada y a los límites históricos, donde un resultado aparentemente ordenado puede ocultar una definición equivocada.
Usa el contrato de la carga de trabajo para la ruta de procesamiento y la granularidad de las filas para la métrica.