パーティション付きのアセットが別のアセットを読むとき、Dagsterはどの上流のパーティションを読み込むかを決めます。
- 両側が同じパーティション:下流のそれぞれのパーティションが同じキーを読みます(恒等)。
- パーティション付きのアセットを読むパーティションのないアセットは、そのパーティションをすべて、パーティションのキーから値への辞書として読みます。
dg.TimeWindowPartitionMapping(start_offset=-1)で日次のデータを読む日次のアセットは、自分の日と前の日を、同じく辞書として読みます:ループなしの移動期間です。
入力に対応を設定してください:ins={"daily_shipments": dg.AssetIn(partition_mapping=...)}、または依存関係にdg.AssetDep(asset, partition_mapping=...)です。
最初のパーティションより前に届くオフセットは、そのデータが存在しないのでエラーになります。最初の期間が短いかもしれないときは、allow_nonexistent_upstream_partitions=Trueを渡し、小さい辞書を扱ってください。