1. Nauka
    2. /
  2. Kursy
    3. /
  3. Machine Learning với PySpark
Connected

Ćwiczenie

Gộp các cột

Bước cuối cùng của việc chuẩn bị dữ liệu là gom tất cả các cột biến dự đoán vào một cột duy nhất.

Một phiên bản đã cập nhật của dữ liệu flights, đã tính đến mọi thay đổi từ vài bài trước, có các cột biến dự đoán sau:

  • mon, dom và dow
  • carrier_idx (giá trị đã đánh chỉ mục từ carrier)
  • org_idx (giá trị đã đánh chỉ mục từ org)
  • km
  • depart
  • duration

Lưu ý: Tham số truncate=False của phương thức show() giúp ngăn không cắt ngắn dữ liệu trong phần đầu ra.

Instrukcje

100 XP
  • Nhập lớp sẽ dùng để gộp các biến dự đoán.
  • Tạo một đối tượng assembler cho phép bạn hợp nhất các cột biến dự đoán vào một cột duy nhất.
  • Dùng assembler để tạo một cột tổng hợp mới.