DataFrameのjoinは、別のDataFrame、条件または共通のキー、結合の種類を受け取ります。左結合は左のレコードを残します。left_semiとleft_antiは、右側のフィールドを加えずに、一致があるかないかを判定します。クロス結合はすべての組み合わせを作るので、小さな計画のグリッドには役立ちますが、大きな入力では高価です。
注文を顧客に結合する前に、顧客のidの名前をcustomer_idに変え、必要な顧客のフィールドだけを選択してください。そうすると、後でidの参照があいまいになりません。ユニオンは、キーを照合するのではなく、行を積み重ねます。unionは位置でそろえ、unionByNameは名前でそろえます。どちらも、重複を自動で除きません。例では、ソースの列の位置が異なる場合に、名前でのそろえ方を使います。分散したSparkでは、結合を実行するためにデータをシャッフルすることがあります。このローカルのシミュレーターが確認するのは行で、主張された本番の実行時間ではありません。