1. Học hỏi
    2. /
  2. Khoa Học
    3. /
  3. Nền tảng Big Data với PySpark
Connected

Bài tập

Tìm hiểu SparkContext

SparkContext là điểm khởi đầu để dùng các chức năng của Spark. Hãy hình dung nó như chiếc chìa khóa để khởi động xe. Khi bạn chạy bất kỳ ứng dụng Spark nào, một chương trình driver sẽ khởi động, chứa hàm main và SparkContext của bạn được tạo tại đây. PySpark tự động tạo một SparkContext cho bạn trong PySpark shell (vì vậy bạn không phải tự tạo) và cung cấp nó qua biến sc.

Trong bài tập đơn giản này, bạn sẽ xem các thuộc tính của SparkContext trong PySpark shell mà bạn sẽ dùng cho phần còn lại của khóa học.

Hướng dẫn

100 XP
  • In ra phiên bản của SparkContext trong PySpark shell.
  • In ra phiên bản Python của SparkContext trong PySpark shell.
  • Master của SparkContext trong PySpark shell là gì?