Nạp các tệp được lưu trữ

Nhóm kỹ sư dữ liệu của bạn tại Sierra Publishing đang tìm hiểu các tính năng khác nhau của Databricks cho các pipeline kỹ thuật dữ liệu. Một kỹ sư dữ liệu đã nêu cho bạn một vấn đề:

Hiện tại, tôi đang đọc nhiều tệp CSV từ một vị trí data lake bên ngoài. Rất khó để giữ cho các bảng của tôi chính xác vì tôi không bao giờ biết khi nào có tệp dữ liệu mới, và tôi cũng không dễ dàng nhớ được những tệp nào mình đã nạp vào bảng rồi.

Bạn muốn dùng tính năng sẵn có của Databricks để giải quyết vấn đề này. Trong các lựa chọn sau, phương án nào sẽ giúp giải quyết vấn đề?