การจัดการชุดข้อมูล

ในงาน ML มักจะต้องจัดการชุดข้อมูลก่อนนำไปใช้งานเสมอ การจัดการที่พบบ่อยได้แก่ การกรอง (filtering) และการเลือก (selecting หรือ slicing) เนื่องจากชุดข้อมูลเหล่านี้มีขนาดใหญ่ Hugging Face จึงใช้ไฟล์ประเภท Arrow

ซึ่งหมายความว่าวิธีการจัดการข้อมูลจะแตกต่างจากที่คุ้นเคยอยู่บ้าง แต่ไม่ต้องกังวล มีเมธอดพร้อมให้ใช้งานอยู่แล้ว!

ชุดข้อมูลถูกโหลดไว้ให้แล้วในตัวแปร wikipedia