Порівняння моделей на розмічених відгуках
Тепер, коли ви можете класифікувати тональність пакетно, команда хоче оцінити, яка модель надійніша. Ви порівняєте дві моделі на більшому розміченому наборі відгуків і виміряєте їхню точність.
Списки texts і відповідні true_labels вже завантажені для вас.
Ця вправа є частиною курсу
Natural Language Processing (NLP) in Python
Інтерактивна практична вправа
Спробуйте виконати цю вправу, доповнивши цей зразок коду.
from transformers import pipeline
from sklearn.metrics import accuracy_score
# Load sentiment analysis models
pipe_a = pipeline(task="sentiment-analysis", ____)
pipe_b = pipeline(task="sentiment-analysis", ____)
# Generate predictions
preds_a = [____ for res in pipe_a(texts)]
preds_b = [____ for res in pipe_b(texts)]