Delta Lake로 소매 데이터 스트리밍하기
Global Retail Analytics 팀의 볼륨에는 매일 새로운 주문 파일이 추가됩니다.
매일 아침 전체 데이터를 다시 불러오는 대신, 새로운 CSV 파일을 자동으로 감지해 Delta Lake에 기록하고, 체크포인트를 활용해 재시작 시에도 안정적으로 복구되는 스트리밍 파이프라인을 구축해 보세요.
이 연습은 강의의 일부입니다
Global Retail Analytics 팀의 볼륨에는 매일 새로운 주문 파일이 추가됩니다.
매일 아침 전체 데이터를 다시 불러오는 대신, 새로운 CSV 파일을 자동으로 감지해 Delta Lake에 기록하고, 체크포인트를 활용해 재시작 시에도 안정적으로 복구되는 스트리밍 파이프라인을 구축해 보세요.
이 연습은 강의의 일부입니다