Meadow Schedulingのコーディネーターが、リマインダーの優先度のオフライン評価を依頼しています。架空の予約前のレコードを使い、ホールドアウトを保ったまま、ベースラインの再現率、モデルの確率、しきい値で決めたラベル、再現率、そしてルールに基づく試験運用の推奨を提出してください。モデルが予約の利用を制限してはなりません。
Meadow Schedulingは、任意のリマインダーの電話に優先順位を付けたいと考えています。その架空のテーブルには、予約の前にわかっている情報が入っています:過去の来院、予約から当日までの日数、来院しなかった履歴です。クラス1は、来院しなかった予約を意味します。コーディネーターはリスクのスコアを電話の順番付けに使えますが、それで誰かが診療を予約できるかどうかを決めてはなりません。
コーディネーターが確かめられる、小さな評価記録を作ってください。シードを設定したクラスの事前確率によるベースラインから始め、ロジスティック回帰を当てはめ、その確率を残し、示されたしきい値でラベルを評価します。最終的な推奨は、将来の来院についての約束ではなく、測定した再現率の差と照らし合わせて確かめます。ケースを通じて、テストの行は当てはめの外に置いてください。各ステップはノートブックの続きで、後の出力は、前の結果をそのまま引き継ぐのではなく、新しい証拠を加えます。