Tim outlet membutuhkan notebook yang bisa mereka baca tanpa harus menerjemahkan antara objek Python dan kolom Spark. Bekerjalah dengan tabel terpisahnya, main.silver.outlet_orders. Setiap jawaban harus menampilkan DataFrame akhir, bukan mencetak teks query SQL.
Anda akan menggabungkan transformasi dari pelajaran sebelumnya: memilih kolom, memfilter record, mengganti nama field, menormalkan teks, dan menangani nilai yang hilang. Operasi yang sama bisa berguna atau justru merugikan, tergantung pada soalnya. Mengisi jumlah yang tidak diketahui sudah tepat untuk laporan dengan nilai default nol, tetapi salah untuk audit kelengkapan yang harus mempertahankan NULL. Pahami perbedaan itu sebelum menulis ekspresi. Ekstrak outlet juga memuat pelanggan yang berulang, jadi daftar kunci pembeli perlu dideduplikasi meskipun id pesanannya unik.
Kembalikan status sebagai kolom kedua.