Uma comparação justa mantém visíveis as identidades dos casos. Omitir um caso com falha não equivale a corrigi-lo, e um exemplo novo não deve alterar o denominador silenciosamente. Separe correções, novas falhas, inclusões e remoções antes de substituir a referência.
Compare case.baseline e case.candidate por identificadores compartilhados. Devolva as listas ordenadas fixed, new_failures, added e removed. Um caso ausente em uma versão não comprova que foi corrigido.
O notebook executa seu código Python com um simulador local original. Use os dados do caso em vez de copiar os valores visíveis. As verificações ocultas alteram identidades, revisões e entradas-limite; nenhum fornecedor ou ferramenta externa é contatado.
Uma implementação de exemplo do contrato da função.