โหลดข้อมูล
การอ่านข้อมูลเข้ามาคือก้าวแรกของการใช้ PySpark สำหรับงาน data science มาใช้ประโยชน์จากไฟล์ parquet ซึ่งกำลังเป็นมาตรฐานใหม่ของอุตสาหกรรมกัน
แบบฝึกหัดนี้เป็นส่วนหนึ่งของหลักสูตร
Feature Engineering with PySpark
คำแนะนำการฝึกหัด
- ใช้ตัวอ่านไฟล์
parquet()เพื่ออ่านไฟล์'Real_Estate.parq'ตามที่อธิบายไว้ในวิดีโอ - แสดงรายชื่อคอลัมน์ด้วย
columns
แบบฝึกหัดเชิงโต้ตอบแบบลงมือทำ
ลองทำแบบฝึกหัดนี้โดยเติมโค้ดตัวอย่างนี้ให้สมบูรณ์
# Read the file into a dataframe
df = spark.read.____(____)
# Print columns in dataframe
____(df.____)