Fenwick Market menguji proses checkout baru: separuh sesi melihat A, separuh lainnya melihat B. Setiap sesi berkonversi atau tidak, sehingga setiap grup memiliki tingkat konversi. Uji z dua proporsi menanyakan apakah selisih kedua tingkat itu lebih besar daripada yang bisa terjadi karena kebetulan.
Di statsmodels: proportions_ztest(counts, nobs) dengan jumlah konversi dan jumlah sesi tiap grup, dalam urutan yang sama. alternative='larger' menguji apakah tingkat grup pertama lebih besar.
Laporkan tiga hal: kedua tingkat konversi, lift (tingkat B dibagi tingkat A, dikurangi 1, yaitu perubahan relatif) atau selisih absolut dalam poin, dan interval kepercayaan untuk selisihnya: confint_proportions_2indep(count_b, n_b, count_a, n_a) menghasilkan B dikurangi A.
Uji t pada data 0/1 menghasilkan nilai p yang hampir sama untuk sampel besar, tetapi uji z adalah alat standar dan menangani tingkat yang kecil dengan baik.