Porovnání modelů na označených datech recenzí
Teď, když umíš klasifikovat sentiment hromadně, chce tvůj tým zjistit, který model je spolehlivější. Porovnáš dva modely na větším označeném datasetu recenzí a změříš jejich přesnost.
Seznam texts a jeho true_labels jsou pro tebe předem načtené.
Toto cvičení je součástí kurzu
Zpracování přirozeného jazyka (NLP) v Pythonu
Interaktivní cvičení na vyzkoušení si v praxi
Vyzkoušejte si toto cvičení dokončením tohoto ukázkového kódu.
from transformers import pipeline
from sklearn.metrics import accuracy_score
# Load sentiment analysis models
pipe_a = pipeline(task="sentiment-analysis", ____)
pipe_b = pipeline(task="sentiment-analysis", ____)
# Generate predictions
preds_a = [____ for res in pipe_a(texts)]
preds_b = [____ for res in pipe_b(texts)]