Bukti evaluasi untuk rilis
Tim produk pembelajaran membandingkan baseline A dengan kandidat B pada 20 kasus umpan balik held-out. A lulus 16; B lulus 18. B gagal pada kedua kasus yang melibatkan catatan privat instruktur, sedangkan A lulus pada keduanya. 18 kasus lainnya adalah kiriman biasa. Kontrak rilis melarang pengungkapan catatan tersebut. Tim sudah melakukan tuning B pada set development terpisah.
Rubrik dan persiapanJawaban level mid mencakup apa saja · 1 pelajaran untuk persiapan
Menengah standar
- Menelusuri input yang berubah melalui jalur serving dan hasil evaluasinya.
- Menguji contoh tandingan yang diberikan dan mempertahankan batas akses atau operasi yang dinyatakan.
- Membandingkan perubahan yang diusulkan dengan baseline tetap menggunakan record sumber yang dapat direproduksi.