Go-live bukanlah akhir dari analisis bisnis. Evaluasi solusi menanyakan apakah perubahan itu memberikan nilai yang dijanjikan business case.
- Kembali ke kebutuhan bisnis dan ukurannya: "Kurangi 75% panggilan yang menanyakan pengembalian dana", "Pengembalian dana dalam 2 hari kerja".
- Ukur sebelum dan sesudah dengan definisi yang sama. Baseline yang diambil sebelum go-live lebih berharga daripada estimasi apa pun sesudahnya.
- Cari penyebab lain. Panggilan bisa turun karena bulan itu sepi, atau naik karena penjualan berlipat dua. Bandingkan dengan kelompok kontrol (toko yang belum go-live), atau gunakan rasio (panggilan per 1,000 retur), bukan total.
- Cari tahu penyebabnya jika nilainya belum muncul: orang masih memakai proses lama, ada defect, atau ada kebutuhan yang keliru.
- Beri rekomendasi: pertahankan, perbaiki, perluas, atau hentikan.
Sebuah solusi bisa lolos semua pengujian dan tetap tidak memberikan nilai. Untuk itulah evaluasi ada.