Kelompok perintah
| Perintah | Tujuan | Hasil yang diperiksa |
|---|---|---|
kafka-topics.sh |
Membuat atau memeriksa topic | Partisi, leader, replika, dan in-sync set |
kafka-configs.sh |
Membaca atau mengubah konfigurasi yang didukung | Retention, cleanup policy, minimum in-sync replicas |
kafka-console-producer.sh |
Mengirim record | Kunci, partisi, dan offset |
kafka-console-consumer.sh |
Membaca record | Offset awal, group, dan isolasi |
kafka-consumer-groups.sh |
Memeriksa group atau mereset offset | Commit, log end, dan lag |
Pilihan native bergantung pada versi terpasang. Perintah lab pada kursus Kafka adalah kontrol pembelajaran, bukan tool distribusi Kafka.
Arti offset
Commit offset 8 berarti record berikutnya yang akan dibaca berada pada offset 8. Jika log end adalah 11, selisih sederhana adalah 3. Angka ini tidak mengukur waktu tunggu dan tidak membuktikan tindakan bisnis di sistem tujuan berhasil.
Penghapusan serta compaction dapat meninggalkan celah offset. Jangan menganggap setiap selisih selalu sama dengan jumlah record yang masih tersedia untuk diproses.
Replay dan pembersihan
Pratinjau reset offset dan pastikan group yang terkena sebelum menerapkannya. Replay dapat mengulangi penulisan ke sistem eksternal. Tentukan bagaimana tujuan menangani data yang diproses ulang.
Retention menghapus data log yang memenuhi syarat. Compaction pada akhirnya mempertahankan nilai terbaru per kunci serta menangani tombstone sesuai konfigurasinya. Kedua kebijakan tersebut tidak menggantikan rencana pemulihan aplikasi.
Pelajari skenario interview Kafka untuk menguji pemahaman commit dan replikasi. Gunakan tutorial Kafka Streams setelah model partisi dan offset sudah jelas.