Un modelo que era preciso en su lanzamiento deriva a medida que cambia el mundo. La deriva de datos es un cambio en las entradas: un segmento de clientes nuevo, una categoría renombrada, un sensor recalibrado. La deriva de concepto es un cambio en la relación entre entradas y resultados: las mismas señales empiezan a significar otra cosa. Las dos bajan la calidad sin provocar un solo error.
Vigila en tres niveles. Las comprobaciones de datos detectan pronto las entradas rotas: esquema, valores ausentes, rangos. Las comprobaciones de distribución comparan las entradas y predicciones en vivo con una ventana de referencia. Las métricas de resultado miden la calidad real, pero las etiquetas suelen llegar tarde, días o semanas después de la predicción, así que las comprobaciones anteriores son tu sistema de alerta. Decide de antemano qué provoca un reentrenamiento y a quién se avisa.
Vigila las entradas, las predicciones y los resultados, y actúa ante la deriva antes de que lleguen las etiquetas.