Quando as duas variáveis são categorias, como o canal de um teste gratuito e se ele converteu, um teste qui-quadrado de independência pergunta se o resultado depende do grupo. Ele compara as contagens observadas em uma tabela com as contagens esperadas se não houvesse relação.
No SciPy: monte a tabela com pd.crosstab(linhas, colunas) e depois stats.chi2_contingency(table) retorna a estatística, o valor p, os graus de liberdade ((linhas - 1) × (colunas - 1)) e as contagens esperadas.
Confira se as contagens esperadas são de pelo menos 5, mais ou menos; abaixo disso, o teste não é confiável.
Em uma tabela de 2 × 2, o SciPy aplica por padrão a correção de continuidade de Yates. Sem ela (correction=False), a estatística qui-quadrado é igual ao quadrado do z de duas proporções.
Passe contagens, nunca porcentagens: o teste precisa saber o tamanho da amostra.