1. Обучение
    2. /
  2. Курса
    3. /
  3. Введение в LLM на Python
Connected

упражнение

Оценка с помощью METEOR

Метрика METEOR отлично справляется с оценкой семантических характеристик текста. Она работает по схожему с ROUGE принципу: сравнивает текст, сгенерированный моделью, с эталонным. Оба текста уже доступны вам в виде переменных generated и reference — вам остаётся вычислить итоговую оценку.

Библиотека evaluate уже загружена.

Инструкции

100 XP
  • Вычислите и выведите значение метрики METEOR.