Mara, perencana kapasitas di perusahaan fiktif Harbor Parcel, membutuhkan eksperimen model yang dapat ditinjau. Tabel sandbox practice.capacity_samples berisi satu baris per observasi fiktif asli: sample_id mengidentifikasinya, x adalah input perencanaan yang tersedia sebelumnya, dan y adalah hasil kapasitas yang teramati. Latih model dengan sample_id <= 40 dan sisihkan ID berikutnya untuk validasi. Serahkan register prediksi dan laporan satu baris berisi ukuran holdout, error absolut, dan bias bertanda. Data latihan ini sintetis dan tidak dapat dijadikan dasar prakiraan untuk produksi.
Peninjauan model membutuhkan lebih dari sekadar pernyataan bahwa pelatihan sudah selesai. Anda akan memeriksa pembagian data, mencocokkan sebuah garis numerik, mengevaluasi holdout yang terpisah, dan menyimpan register prediksi per baris. Register itu membuat metrik agregat dapat diaudit: analis lain dapat menelusuri setiap residual kembali ke observasinya.
Setiap langkah dimulai dari SQL Anda sebelumnya. Pertahankan definisi model di dalam skrip selagi laporan akhir berkembang, sehingga setiap hasil dapat dibangun ulang dari pembagian pelatihan yang sama. Penyiapan membuat ulang sampel fiktif untuk setiap langkah, termasuk salinan tersembunyi. Jangan mengganti query dengan angka yang disalin dari grid. Rata-rata bertanda bisa mendekati nol meskipun kesalahan individualnya besar, jadi laporan akhir menyertakan error absolut dan juga bias bertanda. Tidak ada penjadwalan di masa depan atau deployment ke produksi yang tersirat.
Error absolut mengukur besarnya selisih. Rata-rata bertanda menunjukkan arahnya dan dapat saling meniadakan.