Quem pediu: Lena Brandt, líder de finanças da Fenwick Market, e a equipe do checkout.
Por quê: a equipe testou um novo checkout em uma única página (B) contra o atual (A) e quer lançá-lo antes das festas de fim de ano.
Os dados: ab, uma linha por sessão: a variante exibida, se fez um pedido e a receita.
Entrega esperada: a divisão verificada, as taxas de conversão e o lift, um teste e um intervalo, a métrica de controle de receita, o poder do teste e uma decisão que siga a regra que a equipe combinou antes do teste.
Percorra a leitura dos resultados na ordem em que um analista cuidadoso faria: primeiro confie na divisão, depois na métrica principal, em seguida na métrica de controle e, por fim, decida. Cada passo mantém as variáveis dos passos anteriores.