データエンジニアとしての最初の90日
架空のミートアップアプリWayfriendに、2人目のデータエンジニアとして入社しました。アプリの生のイベントをプロダクトチームが信頼できる指標に変え、それを使って実際の問いに答えます。
次へ:招待から合流へ.
これは架空の職務の90日間であり、90日の期限ではありません。自分のペースで進めてください。確認済みの表と章の進捗は引き継がれます。
Wayfriend
一般消費者向けアプリ
友人と会う計画を立てるためのアプリ。オースティン、デンバー、ポートランドで提供されています。
Wayfriendは、友人同士の計画を実際に会うことにつなげるアプリです。1人が時間と場所を決めて招待を送り、友人が承諾し、向かっている人は誰でも位置情報を共有できます。アプリは米国の3都市で提供されており、すべての招待と位置情報のpingをUTCで記録していますが、スマートフォンがpingを取りこぼすため、データには抜けがあります。プロダクトリードの下にある2人のデータチームに加わり、グロースチームと密接に働きます。
- 設立
- 2023
- 本社
- コロラド州デンバー
- 都市
- 3
- 従業員数
- 約30人
依頼を出す人
- Rosa Imaniプロダクトリード
- Theo Blumグロースリード
架空の会社です。人物と数値は練習用に作られたものです。
章
- 1〜30日目プロジェクト
招待から合流へ
Wayfriendは、会う計画を立てた友人が実際に一緒に過ごしているかを知りたいと考えています。生のイベントをクリーニングし、合流をモデル化し、成功を測定して、翌日の作業を計画してください。
Databricks → dbt → SQL → Dagster → 報告
最初の依頼:プロダクトリードは、承諾された招待が実際に一緒に過ごす時間につながっているかを知りたいと考えています。
- 31日目から50日目ケーススタディ
リマインダーの問い
デンバーでは、予定された合流の前にリマインダーの通知をテストしました。Wayfriendがすべての都市でそれを送るべきかを判断してください。
Databricks → SQL → 提言
合流のモデルが本番で動いています。グロースリードはあらゆる場所でリマインダーを送りたいと考えており、パイロットで何がわかったかを尋ねています。
- 51日目から70日目プロジェクト
パイプラインの信頼性を保つ
読み込みの遅れがダッシュボードに届かないよう、鮮度のチェックとアラートを追加します。
Dagster → dbt
読み込みの遅れにより、前日の数値が経営陣の目に触れました。
近日公開 - 71日目から90日目ケーススタディ
次はどの都市か?
候補の3都市を比べ、Wayfriendが次にどこで提供を始めるかを提言します。
SQL → Databricks
四半期は、提供開始の判断で締めくくります。
近日公開
修了のまとめ
章を修了すると、作業内容、練習したツール、裏付けた判断のまとめが作成されます。
共有するかどうかは自由です。まとめには、架空の会社での練習であることが記載されます。