Melanjutkan setelah restart
Pipeline streaming Anda di Global Retail Analytics mengambil file CSV baru dari sebuah volume Unity Catalog dan menuliskannya ke Delta Lake. Setelah gangguan akhir pekan, klaster dimulai ulang pada Senin pagi. Tiga file baru masuk selama akhir pekan. Stream hanya memproses ketiga file tersebut — tidak ada file dari minggu sebelumnya yang dimuat ulang.
Apa yang memungkinkan stream melewati file yang sudah diproses dan melanjutkan tepat dari titik terakhir?
Latihan ini merupakan bagian dari kursus
Transformasi Data dengan Spark SQL di Databricks
Latihan interaktif langsung
Ubah teori menjadi aksi dengan salah satu latihan interaktif kami
Mulai latihan