Сравнение моделей на размеченных данных отзывов
Теперь, когда вы умеете классифицировать тональность текста в пакетном режиме, ваша команда хочет оценить, какая модель работает надёжнее. Вы сравните две модели на более крупном размеченном наборе данных отзывов и измерите их точность.
Список texts и соответствующие true_labels уже загружены для вас.
Это упражнение является частью курса
Обработка естественного языка (NLP) на Python
Интерактивное практическое упражнение
Попробуйте выполнить это упражнение, дополнив этот пример кода.
from transformers import pipeline
from sklearn.metrics import accuracy_score
# Load sentiment analysis models
pipe_a = pipeline(task="sentiment-analysis", ____)
pipe_b = pipeline(task="sentiment-analysis", ____)
# Generate predictions
preds_a = [____ for res in pipe_a(texts)]
preds_b = [____ for res in pipe_b(texts)]