1. Học hỏi
    2. /
  2. Khoa Học
    3. /
  3. Nhập môn Spark SQL bằng Python
Connected

Bài tập

Thực hành logging 2

Đoạn mã sau được chạy khi khởi động:

import logging
logging.basicConfig(stream=sys.stdout, level=logging.DEBUG,
                    format='%(levelname)s - %(message)s')

Trong bài học, bạn đã biết rằng các thao tác Spark kích hoạt action phải được ghi log cẩn thận để tránh âm thầm làm thất thoát tài nguyên tính toán. Giờ bạn sẽ luyện tập nhận diện các câu lệnh log kích hoạt action trên một dataframe hoặc bảng.

Một dataframe text_df có sẵn. Dataframe này được đăng ký dưới dạng một bảng tên là table1.

Hướng dẫn

100 XP
  • Có một số câu lệnh log được cung cấp và tất cả đều đang được comment. Hãy bỏ comment năm câu lệnh KHÔNG kích hoạt action trên text_df.