So sánh mô hình trên dữ liệu đánh giá có nhãn
Giờ bạn đã có thể phân loại cảm xúc hàng loạt, nhóm của bạn muốn đánh giá mô hình nào đáng tin cậy hơn. Bạn sẽ so sánh hai mô hình bằng một tập dữ liệu đánh giá lớn hơn đã có nhãn và đo độ chính xác của chúng.
Danh sách texts và true_labels đã được nạp sẵn cho bạn.
Bài tập này là một phần của khóa học
Natural Language Processing (NLP) bằng Python
Bài tập tương tác thực hành trực tiếp
Hãy thử làm bài tập này bằng cách hoàn thành đoạn mã mẫu này.
from transformers import pipeline
from sklearn.metrics import accuracy_score
# Load sentiment analysis models
pipe_a = pipeline(task="sentiment-analysis", ____)
pipe_b = pipeline(task="sentiment-analysis", ____)
# Generate predictions
preds_a = [____ for res in pipe_a(texts)]
preds_b = [____ for res in pipe_b(texts)]