DataFrame Spark adalah deskripsi komputasi yang berbentuk tabel. Membaca spark.table('main.bronze.orders') tidak menyalin semua recordnya ke dalam list Python. Transformasi seperti select dan filter membangun sebuah rencana. Action, termasuk show, count, dan collect, meminta Spark menjalankan rencana itu.
Gunakan display(df) untuk grid hasil workspace. df.show() mencetak tabel teks, yang praktis saat debugging. Memanggil show pada sebuah kolom adalah error karena kolom hanya menggambarkan satu ekspresi dan tidak dapat menampilkan tabel. Mulailah dengan memilih beberapa kolom bernama, alih-alih mengumpulkan seluruh feed. Di browser ini, API yang sudah dikenal itu membangun SQL untuk engine lokal. Di sini Anda berlatih operasi dan hasilnya; eksekusi terdistribusi dan kapasitas produksi adalah bagian dari lingkungan Spark yang sebenarnya.
Pilih amount sebagai kolom kedua, bukan status.