Modellen vergelijken op gelabelde reviewdata
Nu je sentiment in bulk kunt classificeren, wil je team beoordelen welk model betrouwbaarder is. Je vergelijkt twee modellen met een grotere gelabelde gegevensset van reviews en meet hun nauwkeurigheid.
Een lijst texts en de bijbehorende true_labels zijn alvast voor je geladen.
Deze oefening maakt deel uit van de cursus
Natural Language Processing (NLP) in Python
Praktische interactieve oefening
Probeer deze oefening eens door deze voorbeeldcode in te vullen.
from transformers import pipeline
from sklearn.metrics import accuracy_score
# Load sentiment analysis models
pipe_a = pipeline(task="sentiment-analysis", ____)
pipe_b = pipeline(task="sentiment-analysis", ____)
# Generate predictions
preds_a = [____ for res in pipe_a(texts)]
preds_b = [____ for res in pipe_b(texts)]