Porównywanie modeli na oznaczonych danych z recenzjami
Skoro potrafisz już klasyfikować sentyment na większą skalę, twój zespół chce sprawdzić, który model jest bardziej niezawodny. Porównasz dwa modele, korzystając z większego oznaczonego zbioru danych z recenzjami, i zmierzysz ich dokładność.
Lista texts wraz z odpowiadającymi jej true_labels są już wczytane.
To ćwiczenie jest częścią kursu
Przetwarzanie języka naturalnego (NLP) w Pythonie
Interaktywne ćwiczenie praktyczne
Spróbuj tego ćwiczenia, uzupełniając ten przykładowy kod.
from transformers import pipeline
from sklearn.metrics import accuracy_score
# Load sentiment analysis models
pipe_a = pipeline(task="sentiment-analysis", ____)
pipe_b = pipeline(task="sentiment-analysis", ____)
# Generate predictions
preds_a = [____ for res in pipe_a(texts)]
preds_b = [____ for res in pipe_b(texts)]