Quarry Cloud pide un planificador que ejecute 4,320,000 trabajos al día para sus clientes, con un pico de 20 veces al principio de cada hora. Entrega el alcance, una estimación del pico de despacho, una API de trabajos, una tabla de ejecuciones, la ruta de despacho, una barrera para los workers obsoletos y un plan para el pico horario.
Cómo valoran este diseño en una entrevista según el nivel
- Junior: guarda de forma duradera las ejecuciones pendientes y las despacha a los workers a través de una cola.
- Nivel medio: reclama cada ejecución una sola vez con una restricción de unicidad, usa arrendamientos y entrega al menos una vez, y reintenta con espera.
- Senior: bloquea a los workers obsoletos, aplana los picos, aísla a los clientes ruidosos y explica por qué los efectos exactamente una vez necesitan manejadores idempotentes.
Quarry Cloud ejecuta millones de trabajos programados al día para sus clientes: exportaciones nocturnas, sincronizaciones cada hora, recordatorios. Los clientes esperan que un trabajo empiece cerca de su hora programada, que se reintente si falla y que nunca se ejecute dos veces a la vez. Muchos trabajos se programan al principio de la hora, así que la carga llega en picos muy marcados.
El núcleo del diseño es una lista duradera de ejecuciones pendientes, un paso de reclamación que solo puede ganar un despachador y workers que mantienen un arrendamiento mientras trabajan. La entrega es al menos una vez, así que los manejadores tienen que poder repetirse sin riesgo, y un worker que se congela más allá de su arrendamiento no debe seguir escribiendo. Estimarás el pico, definirás la API y la tabla de ejecuciones, dibujarás la ruta de despacho y cerrarás las dos ventanas de fallo clásicas.
Reclama cada ejecución una sola vez, entrega al menos una vez con arrendamientos, bloquea a los workers obsoletos y aplana los picos de principio de hora.