全体のスコアが改善しても、より小さな母集団がより悪い予測を受けることがあります。明示したセグメントの中の誤差を調べ、各推定値の裏にある結果の証拠の量を報告します。観測された事象が1つしかないセグメントは、表示された値が正確に見えても、再現率がもろくなります。欠けている結果があると比較が難しくなるので、確定したラベルだけを評価し、未完了の期間を見えるようにしておいてください。このレッスンの切り分けは、架空の顧客のグループとモデルの残差を表します。診断を支えるもので、法的な公平性の主張や因果の説明ではありません。ビジネスの要件を使って比較を選び、その後、変更を提案する前に不確実性を調べてください。