Ketika sebuah asset berpartisi membaca asset lain, Dagster menentukan partisi upstream mana yang dimuat.
- Partisi yang sama di kedua sisi: setiap partisi downstream membaca kunci yang sama (identity).
- Asset tanpa partisi yang membaca asset berpartisi membaca semuanya, sebagai dictionary dari kunci partisi ke nilai.
- Asset harian yang membaca data harian dengan
dg.TimeWindowPartitionMapping(start_offset=-1) membaca harinya sendiri dan hari sebelumnya, juga sebagai dictionary: jendela bergulir tanpa loop.
Tetapkan mapping pada input: ins={"daily_shipments": dg.AssetIn(partition_mapping=...)}, atau pada dependensi dengan dg.AssetDep(asset, partition_mapping=...).
Offset yang menjangkau sebelum partisi pertama akan menimbulkan error, karena data itu tidak ada. Jika jendela pertama mungkin lebih pendek, berikan allow_nonexistent_upstream_partitions=True dan tangani dictionary yang lebih kecil.
Setiap partisi membaca harinya sendiri dan hari sebelumnya.