Bir veri hattını idempotent hale getirme
Bir çalışma arkadaşının veri hattı her çalıştırmada satış verilerini ekliyor; bu yüzden yeniden çalıştırmalar ve backfill işlemleri kopyalara yol açıyor. Hem staging hem de sales tablolarında YYYY-MM-DD biçiminde date sütunu var.
Ekibinin veri hattını idempotent yapması gerekiyor: staging sorgusunu mantıksal tarihe göre filtrele ve sales tablosundaki mevcut satırları silmek için bir preoperator ekle.
Bu egzersiz, kursun bir parçasıdır
Airflow ile Veri İş Hatları Oluşturma
Uygulamalı etkileşimli egzersiz
Teoriyi etkileşime dönüştürün, interaktif egzersizlerimizden biriyle
Egzersize başla