Etiketli yorum verilerinde modelleri karşılaştırma
Artık duygu durumunu toplu olarak sınıflandırabildiğine göre, ekibin hangi modelin daha güvenilir olduğunu değerlendirmek istiyor. Daha büyük, etiketli bir yorum veri kümesiyle iki modeli karşılaştıracak ve doğruluklarını ölçeceksin.
Bir texts listesi ve ona karşılık gelen true_labels senin için önceden yüklendi.
Bu egzersiz, kursun bir parçasıdır
Python ile Natural Language Processing (NLP)
Uygulamalı etkileşimli egzersiz
Bu egzersizi bu örnek kodu tamamlayarak deneyin.
from transformers import pipeline
from sklearn.metrics import accuracy_score
# Load sentiment analysis models
pipe_a = pipeline(task="sentiment-analysis", ____)
pipe_b = pipeline(task="sentiment-analysis", ____)
# Generate predictions
preds_a = [____ for res in pipe_a(texts)]
preds_b = [____ for res in pipe_b(texts)]