การเปรียบเทียบโมเดลบนข้อมูลรีวิวที่มีป้ายกำกับ
เมื่อสามารถจำแนกความรู้สึกแบบเป็นชุดได้แล้ว ทีมต้องการประเมินว่าโมเดลใดมีความน่าเชื่อถือมากกว่า โดยจะเปรียบเทียบโมเดลสองตัวโดยใช้ชุดข้อมูลรีวิวที่มีป้ายกำกับขนาดใหญ่ขึ้น แล้ววัดความแม่นยำของแต่ละโมเดล
ลิสต์ texts และ true_labels ถูกโหลดไว้ให้แล้ว
แบบฝึกหัดนี้เป็นส่วนหนึ่งของหลักสูตร
การประมวลผลภาษาธรรมชาติ (NLP) ด้วย Python
แบบฝึกหัดเชิงโต้ตอบแบบลงมือทำ
ลองทำแบบฝึกหัดนี้โดยเติมโค้ดตัวอย่างนี้ให้สมบูรณ์
from transformers import pipeline
from sklearn.metrics import accuracy_score
# Load sentiment analysis models
pipe_a = pipeline(task="sentiment-analysis", ____)
pipe_b = pipeline(task="sentiment-analysis", ____)
# Generate predictions
preds_a = [____ for res in pipe_a(texts)]
preds_b = [____ for res in pipe_b(texts)]