国または地域と言語

    国または地域と、言語を選んでください。

    おすすめ

      すべての国と地域

        キャラクターを選ぶ

        上部のバーとプロフィールに表示されます。いつでも変更できます。

        機械学習の理論とケース

        与えられた根拠を使って、汎化、リーケージ、指標、キャリブレーション、モデルの解釈を説明します。

        • 10 件のシナリオ
        • 30 to 35 分ずつ
        • 話すか入力して 回答します
        • レポートの基準: 選んだレベル

        質問は合成音声が行います。

        面接のレベル

        練習シナリオ

        シナリオを選んでください。各面接は、選んだレベルのレポートで終わります。

        30 min4 段階ミドル レベル

        リリースのための評価の根拠

        学習プロダクトのチームが、20件の評価用のフィードバックのケースで、ベースラインのAと候補のBを比べています。Aは16件、Bは18件で合格します。Bは講師の非公開のメモを含む2つのケースの両方で不合格になり、Aはそれらに合格しています。ほかの18件は通常の提出物です。リリースの契約では、それらのメモを明かすことは禁止されています。チームは、すでに別の開発用のセットでBを調整しています。

        面接を始める
        ルーブリックと準備求められる内容: mid レベルの回答 · 準備に1レッスン

        ミドル の基準

        • 変更された入力を、サービングの経路と評価の結果を通してトレースしている。
        • 与えられた反例をテストし、示されたアクセスや操作の境界を保っている。
        • 再現できる元のレコードを使って、提案された変更を固定のベースラインと比べている。
        30 min4 段階ミドル レベル

        生成されたドキュメントのエンドポイント

        生成されたこのサービスのコードをレビューしてください。request.tenantは認証済みですが、文書IDはユーザーの入力です。文書のストアは、別のテナントのファイルを返すことがあります。ログの出力先は、サポートと共有されています。 ```python def answer(request, doc_id): doc = store.get(doc_id) log.info({"token": request.token, "document": doc.text}) return model.reply(doc.text + request.question) ``` アシスタントはすべてのテストが通ると主張していますが、存在するのは同じテナントでの正常系のテストだけです。

        面接を始める
        ルーブリックと準備求められる内容: mid レベルの回答 · 準備に1レッスン

        ミドル の基準

        • 変更された入力を、サービングの経路と評価の結果を通してトレースしている。
        • 与えられた反例をテストし、示されたアクセスや操作の境界を保っている。
        • 再現できる元のレコードを使って、提案された変更を固定のベースラインと比べている。
        30 min4 段階ミドル レベル

        結果のわからないツールの呼び出し

        Birch Archiveは、モデルのクライアントを使ってアーカイブのリクエストを提案します。そのツールのスキーマでは、archive_record(record_id, operation_id)が許可されています。モデルは、ある試行では形式が不正な引数を、次の試行では有効な引数を返します。有効なリクエストは、ストアがレコードをアーカイブした可能性がある後でタイムアウトします。新しい操作のIDは、別の書き込みになります。

        面接を始める
        ルーブリックと準備求められる内容: mid レベルの回答 · 準備に1レッスン

        ミドル の基準

        • 変更された入力を、サービングの経路と評価の結果を通してトレースしている。
        • 与えられた反例をテストし、示されたアクセスや操作の境界を保っている。
        • 再現できる元のレコードを使って、提案された変更を固定のベースラインと比べている。
        30 min4 段階ミドル レベル

        モデルの設定の変更

        Pine Intakeは、12秒以内にリクエストを完了する必要があります。現在のモデルの経路には7秒かかり、提案された検索のステップには、生成の前に4秒かかります。これらは同じ固定のローカルのワークロードで測定したもので、本番のパーセンタイルではありません。チームは、それぞれのバージョンを別々にテストしただけで、モデルと検索の設定を一緒に切り替えたいと考えています。

        面接を始める
        ルーブリックと準備求められる内容: mid レベルの回答 · 準備に1レッスン

        ミドル の基準

        • 変更された入力を、サービングの経路と評価の結果を通してトレースしている。
        • 与えられた反例をテストし、示されたアクセスや操作の境界を保っている。
        • 再現できる元のレコードを使って、提案された変更を固定のベースラインと比べている。
        35 min4 段階ミドル レベル

        検証のギャップが大きい需要のモデル

        架空のTern Retailでは、モデルAの学習のMAEは1、検証のMAEは9単位です。モデルBの学習のMAEは5、検証のMAEは6単位です。どちらも同じ時系列の分割を使っています。これらは提供されたレビュー用の数値であり、雇用主で測定した結果ではありません。次の実験を選ぶ前に、ギャップから何が言えるかを判断してください。

        面接を始める
        ルーブリックと準備求められる内容: mid レベルの回答 · 準備に1レッスン

        ミドル の基準

        • デプロイ先の対象とタイミングに合った検証の手順を選んでいる。
        • モデルの比較を、ビジネス上のコスト、容量の制約、または明示的な損失に結び付けている。
        • 競合する説明を擁護し、結論を変えうる根拠を挙げている。
        35 min4 段階ミドル レベル

        レビューのキャパシティのもとでの不正の指標

        架空のBrookline Paymentsは、確定したラベル付きの100件の支払いについて、2つの動作点を提供しています:AはTP=8、FP=10、FN=2、TN=80、BはTP=6、FP=4、FN=4、TN=86です。レビュー担当者がこの対象から確認できるのは、最大12件の支払いです。数値はすべて練習問題の入力値です。実現可能な動作点を選び、まだ欠けている根拠を説明してください。

        面接を始める
        ルーブリックと準備求められる内容: mid レベルの回答 · 準備に1レッスン

        ミドル の基準

        • デプロイ先の対象とタイミングに合った検証の手順を選んでいる。
        • モデルの比較を、ビジネス上のコスト、容量の制約、または明示的な損失に結び付けている。
        • 競合する説明を擁護し、結論を変えうる根拠を挙げている。
        35 min4 段階ミドル レベル

        良すぎるように見える解約のモデル

        架空のサブスクリプションサービスは、各アカウントの月の初めにキャンセルを予測しています。行をランダムに分割すると、ほぼ完璧なスコアになります。同じアカウントの複数の月が両方の分割にあり、refund_issuedはキャンセルの後に入力され、補完器は分割の前に当てはめられていました。結果が解約防止のチームに届く前に調査してください。

        面接を始める
        ルーブリックと準備求められる内容: mid レベルの回答 · 準備に1レッスン

        ミドル の基準

        • デプロイ先の対象とタイミングに合った検証の手順を選んでいる。
        • モデルの比較を、ビジネス上のコスト、容量の制約、または明示的な損失に結び付けている。
        • 競合する説明を擁護し、結論を変えうる根拠を挙げている。
        35 min4 段階ミドル レベル

        繰り返し来院するクリニックの交差検証

        架空のRowan Schedulingは、リマインダーのリストが作成された時点で、来院しない予約を予測します。1人の患者が複数回来院することがあります。リリースの対象は、来月の既存のクリニックです。1つのクリニックが後から加わります。患者レベルの情報を守りながら、それらの用途を反映した検証を選んでください。

        面接を始める
        ルーブリックと準備求められる内容: mid レベルの回答 · 準備に1レッスン

        ミドル の基準

        • デプロイ先の対象とタイミングに合った検証の手順を選んでいる。
        • モデルの比較を、ビジネス上のコスト、容量の制約、または明示的な損失に結び付けている。
        • 競合する説明を擁護し、結論を変えうる根拠を挙げている。
        35 min4 段階ミドル レベル

        順位は付けられるが確率が信頼できないリスクスコア

        架空のCove Travelには、キャンセルのリスクのモデルがあります。提供された確定済みのレビュー用のビンでは、20件の予約の予測確率が0.8で、8件がキャンセルしています。ランキングでは、上位のほうにキャンセルが多く分けられたままです。ランキングの品質だけでは、それらの確率で解約防止の施策の価格を決められるかどうかが決まらない理由を説明してください。

        面接を始める
        ルーブリックと準備求められる内容: mid レベルの回答 · 準備に1レッスン

        ミドル の基準

        • デプロイ先の対象とタイミングに合った検証の手順を選んでいる。
        • モデルの比較を、ビジネス上のコスト、容量の制約、または明示的な損失に結び付けている。
        • 競合する説明を擁護し、結論を変えうる根拠を挙げている。
        35 min4 段階ミドル レベル

        最も重要な特徴量と、根拠のない因果の主張

        架空のReed Logisticsは、配達の遅延を予測しています。距離は、パーミュテーション重要度で上位にあります。ルートの種類と距離には相関があります。マネージャーは、どのルートでも1マイル短くすれば、モデルの係数の分だけ遅延が減ると結論づけています。その主張をレビューし、業務上の判断のための根拠を提案してください。

        面接を始める
        ルーブリックと準備求められる内容: mid レベルの回答 · 準備に1レッスン

        ミドル の基準

        • デプロイ先の対象とタイミングに合った検証の手順を選んでいる。
        • モデルの比較を、ビジネス上のコスト、容量の制約、または明示的な損失に結び付けている。
        • 競合する説明を擁護し、結論を変えうる根拠を挙げている。

        面接ハブの利用

        面接ハブはAll Accessに含まれています。続けるには、プランを選ぶかアカウントにサインインしてください。

        プランを見るサインインまたは登録

        Your Work Gym account

        Save your progress and pick up on another device. Your browser's progress comes with you.

        or

        You can keep practicing without an account.

        ヘルプとフィードバック

        質問、うまく動かない点、アイデアなどをお寄せください。メールで返信します。

        どのような内容ですか?

        返信のためだけに使用します。