1. Обучение
    2. /
  2. Курса
    3. /
  3. Введение в LLM на Python
Connected

упражнение

Оценка с помощью ROUGE

Метрика ROUGE широко применяется для оценки задач суммаризации: она сравнивает сгенерированные тексты с эталонными. Вам предоставлены сгенерированный моделью итоговый текст predictions и эталонный текст references для проверки. Вычислите оценки, чтобы узнать, насколько хорошо справилась модель.

Библиотека evaluate уже загружена.

Инструкции

100 XP
  • Загрузите метрику ROUGE.
  • Вычислите оценки ROUGE между сгенерированным и эталонным текстами.