โหลดเมตริกด้วย evaluate
การประเมินประสิทธิภาพของ LLM ต้องอาศัยเมตริก เช่นเดียวกับโมเดล machine learning แบบดั้งเดิม ไลบรารี evaluate ช่วยให้เข้าใจความซับซ้อนของ LLM ได้ง่ายขึ้น เริ่มต้นด้วยการโหลดเมตริกที่ใช้ประเมินโมเดลประเภท classification
ไลบรารี evaluate ถูกโหลดไว้ให้แล้ว
แบบฝึกหัดนี้เป็นส่วนหนึ่งของหลักสูตร
Python เบื้องต้นสำหรับ LLMs
คำแนะนำการฝึกหัด
- โหลดเมตริก accuracy, precision, recall และ F1 score
แบบฝึกหัดเชิงโต้ตอบแบบลงมือทำ
ลองทำแบบฝึกหัดนี้โดยเติมโค้ดตัวอย่างนี้ให้สมบูรณ์
# Load the metrics
accuracy = ____
precision = ____
recall = ___
f1 = ____