One Course
Setiap pelajaran, proyek, dan tryout di Dagster.
Ditagih bulanan. Batalkan kapan saja.
Level 1: Pendatang baru
0 poin
Login untuk menyimpan progres Anda di berbagai perangkat.
Kursus / Alat data dan analitik
Pelajari Dagster dengan membangun pipeline sebagai asset di workspace Dagster yang berfungsi. Definisikan asset dan resource, jadwalkan job, buat partisi dan backfill, tanggapi event dengan sensor, lalu tambahkan asset check, dengan setiap run diperiksa. Proyeknya mencakup pipeline logistik dengan dbt dan satu insiden pembayaran.
Pilih akses di sini. Kursus Anda sudah dipilih.
Bangun pipeline pendapatan harian Juniper & Pine: partisi, metadata, sebuah check, sebuah job, dan schedule malam hari.
6 langkahProyek · LanjutanMetrik harian per depo untuk perusahaan kurirBangun metrik harian per depo Larkspur Freight: partisi, sebuah KPI dengan metadata, sebuah check peringatan, sebuah job, sebuah schedule, dan sebuah backfill.
6 langkahStudi kasus · LanjutanBackfill yang gagal sebagianBackfill persentase keterlambatan gagal pada beberapa hari. Cari tahu sebabnya, perbaiki, lalu jalankan ulang hanya yang gagal.
5 langkahStudi kasus · AhliSensor yang terpicu dua kaliFile depo utara dimuat dua kali setelah deploy. Temukan penyebabnya di riwayat run dan buat sensor aman untuk dievaluasi ulang.
5 langkahStudi kasus · AhliCelah partisi yang tidak disadari siapa punSeminggu kemudian, tim keuangan menemukan satu hari yang hilang. Isi hari itu, jelaskan mengapa schedule tidak mengisinya, dan buat celah berikutnya terlihat.
4 langkahStudi kasus · AhliSecret yang berbeda di tiap environmentStaging berjalan dan produksi gagal pada API toko. Telusuri sampai ke konfigurasi dan pindahkan semua pengaturan ke environment.
4 langkahProyek · AhliSettlement merchant harian untuk perusahaan pembayaranBangun pipeline settlement Tallyway: penghapusan duplikat, settlement, sebuah check pemblokir, freshness, dan sebuah schedule.
5 langkahTryout · AhliTes teknis Dagster A (dengan batas waktu)Tes teknis Dagster dengan batas waktu, 20 soal: asset, seleksi, konfigurasi, resource, schedule, partisi, sensor, dan check.
20 pertanyaan · 40 minTryout · AhliTes teknis Dagster B (dengan batas waktu)Tes teknis Dagster kedua dengan batas waktu, 20 soal: otomatisasi, mapping, backfill, IO manager, pengujian, dan pertanyaan produksi.
20 pertanyaan · 40 minLatih orkestrasi data di workspace browser yang menjalankan definisi Python Anda pada simulasi Dagster 1.13: asset graph, run dan log event, partisi dan backfill, schedule, sensor, declarative automation, asset check, dan terminal dengan command line dg. Mulailah dengan asset pertama Anda dan dependensinya, lalu tambahkan metadata, config, resource, partisi, sensor, dan pengecekan kualitas data. Level berikutnya mencakup automation condition, retry, pengujian, asset dbt, dan operasi produksi, dengan proyek di bidang ritel, logistik, dan pembayaran, studi kasus insiden, set latihan wawancara, dan tryout berwaktu. Setiap tugas diperiksa pada data Anda dan pada salinan tersembunyi. Tidak perlu instalasi.
Work one company brief through several tools. Your Dagster stage reads the tables from the stage before.
Jelaskan apa yang sudah Anda pelajari dalam wawancara layar penuh. Berbicaralah atau ketik, lalu tinjau jawaban Anda berdasarkan rubrik untuk level Anda.
Proses wawancara per posisiPemula
Definisikan asset, hubungkan, dan materialize seleksi yang tepat.
Catat metadata, tulis ke log hal yang penting, atur asset, dan pilih dengan presisi.
Parameterkan eksekusi, hubungkan sistem eksternal sebagai resource, jauhkan secret dari kode, dan kendalikan penyimpanan.
Menengah
Beri nama pada seleksi sebagai job dan jalankan dengan schedule cron di zona waktu yang tepat.
Partisi asset menurut hari, daftar tetap, atau keduanya, petakan partisi antar-asset, dan backfill riwayat.
Jalankan eksekusi ketika file tiba atau asset berubah, ingat progres dengan cursor, beri peringatan saat gagal, dan tambahkan partisi saat runtime.
Uji data dengan asset check, hentikan data buruk dengan check pemblokir, deklarasikan freshness, dan bangun pipeline pendapatan harian.
Lanjutan
Jaga asset tetap mutakhir dengan automation condition eager, on_cron, dan gabungan.
Tulis job bergaya tugas dengan ops, coba ulang kegagalan sementara, gagal cepat untuk sisanya, dan hasilkan beberapa asset sekaligus.
Uji asset secara langsung, uji sambungan dengan materialize, dan uji sensor serta schedule dengan context yang dibuat.
Muat model dbt sebagai asset, atur key dan grupnya, bangun pipeline kurir berpartisi, dan pulihkan backfill yang separuh gagal.
Ahli
Code location, daemon, antrean eksekusi dan pool konkurensi, serta pemindahan DAG Airflow ke asset.
Diagnosa eksekusi duplikat, celah pada partisi, dan secret environment, lalu bangun pipeline settlement dengan pengaman yang dibutuhkan perusahaan pembayaran.
Pertanyaan wawancara di tiga tingkat dan dua tes teknis Dagster dengan batas waktu, lengkap dengan penjelasan.