Quarry Cloud meminta sebuah penjadwal yang menjalankan 4,320,000 job per hari untuk para pelanggannya, dengan lonjakan 20 kali lipat di awal setiap jam. Serahkan lingkup, estimasi dispatch puncak, API job, tabel eksekusi, jalur dispatch, fencing untuk worker usang, dan rencana untuk lonjakan per jam.
Cara pewawancara menilai level desain ini
- Junior: menyimpan eksekusi yang jatuh tempo secara durable dan mengirimkannya lewat antrean ke worker.
- Mid-level: mengklaim setiap eksekusi satu kali dengan unique constraint, memakai lease dan pengiriman setidaknya satu kali, serta mencoba ulang dengan backoff.
- Senior: memblokir worker usang dengan fencing, meratakan lonjakan, mengisolasi pelanggan yang berisik, dan menjelaskan mengapa efek yang terjadi tepat satu kali membutuhkan handler yang idempoten.
Quarry Cloud menjalankan jutaan job terjadwal per hari untuk para pelanggannya: ekspor malam hari, sinkronisasi per jam, pengingat. Pelanggan mengharapkan sebuah job dimulai mendekati waktu jadwalnya, dicoba ulang saat gagal, dan tidak pernah berjalan dua kali pada saat yang sama. Banyak job dijadwalkan pada awal jam, sehingga beban datang dalam lonjakan tajam.
Inti desainnya adalah daftar eksekusi jatuh tempo yang durable, langkah klaim yang hanya bisa dimenangkan satu dispatcher, dan worker yang memegang lease selama bekerja. Pengiriman dilakukan setidaknya satu kali, sehingga handler job harus aman untuk diulang, dan worker yang membeku melewati lease-nya tidak boleh terus menulis. Anda akan memperkirakan lonjakan, menentukan API dan tabel eksekusi, menggambar jalur dispatch, dan menutup dua jendela kegagalan klasik.
Klaim setiap eksekusi satu kali saja, kirim setidaknya satu kali dengan lease, blokir worker usang dengan fencing, dan ratakan lonjakan di awal jam.