ハイパーパラメーターの選択は、検証の証拠を消費します。最良の選択のスコアを最終的な性能の推定値として報告すると、その追加の選択を無視することになります。入れ子の検証は、各外側の訓練フォールドの中で選択の手順全体を繰り返し、外側のホールドアウトでそれを評価します。外側のロスを計算し、内側のスコアと比べ、フォールドのばらつきをその限界とともに報告します。特に当てはめたモデルが訓練の観測を共有しているときは、3つのフォールドでは信頼区間になりません。最終的なテストの予算も重要です:繰り返し調べると、後の判断に影響することがあります。別の人がモデルの選択の裏にある証拠を理解できるように、各推定値をどの区分が与えたかの記録を残してください。