順位付けの品質とレビューの判断は、別の問いに答えます。ROC AUCは陽性と陰性のスコアの順序を比べ、平均適合率は再現率の変化に伴う適合率を要約します。どちらも連続した事象のスコアを使います。どちらかの数値をビジネスのレポートに載せる前に、それぞれの尺度を計算し、適合率と再現率の曲線を調べます。平均適合率は事象の割合に依存するので、母集団が変わるとその基準の水準も変わります。確定した分類は、曲線からほとんどのしきい値を取り除いてしまいます。陽性のラベルを明示し、配列の順序を保ち、魅力的な順位付けのスコアが、運用チームが何件のレコードをレビューしなければならないかを教えてくれるわけではないことを覚えておいてください。