Pewawancara mungkin meminta Anda memprediksi hasil sebuah DataFrame sebelum meminta Anda menulis kode. Mulailah dari bentuknya: baris mana yang bertahan, kolom mana yang tersisa, dan apa arti nilai yang hilang. Ekspresi kolom menggambarkan pekerjaan untuk Spark; ekspresi itu tidak sama dengan Boolean Python atau daftar nilai yang dikumpulkan ke memori lokal.
Keenam pertanyaan ini memadukan tugas notebook singkat dengan keputusan membaca kode. Tuliskan hasilnya sebelum memeriksa jawaban, dan jelaskan alasan Anda dengan lantang jika Anda berlatih bersama orang lain. Tugas notebook memakai pesanan Aster Supply, termasuk nominal yang hilang, pembeli yang hilang, dan satu pengembalian dana. Record tersebut sengaja dibuat demikian. Jawaban yang benar menanganinya sesuai soal, bukan membuang setiap baris yang merepotkan. Dalam wawancara sungguhan, sebutkan kontrak data yang Anda perlukan sebelum berasumsi.
isNull mengidentifikasi nilai yang hilang. isNotNull membalik flag yang diminta.