Fungsi di pyspark.sql.functions membangun ekspresi kolom. Impor sebagai F agar F.col('amount') terlihat jelas berbeda dari string Python. String saja adalah nilai Python; F.lit mengubah sebuah konstanta menjadi ekspresi kolom. withColumn mengembalikan DataFrame baru dengan ekspresi bernama yang ditambahkan atau diganti.
Field status dan region milik Aster Supply membutuhkan teks yang konsisten untuk pelaporan. Gunakan trim untuk membuang spasi di sekelilingnya dan upper atau lower untuk menormalkan huruf besar-kecil bila aturan bisnis mengizinkannya. Ekspresi when memilih nilai baris demi baris. Akhiri dengan otherwise ketika baris yang tidak cocok membutuhkan label eksplisit; tanpa itu, baris tersebut menjadi NULL. Semua ini adalah transformasi, jadi tampilkan DataFrame akhirnya untuk memeriksa pengaruhnya. Mengganti nama kolom mengubah namanya, bukan nilainya.
Ganti nama kolom amount dengan tetap mempertahankan nilai-nilainya.