1. Apprendre
    2. /
  2. Cours
    3. /
  3. Introduction aux LLM avec Python
Connected

Exercice

Évaluer avec METEOR

METEOR excelle pour évaluer certaines caractéristiques plus sémantiques d'un texte. Son fonctionnement ressemble à ROUGE : on compare la sortie générée par le modèle à une sortie de référence. On vous a fourni ces textes sous forme de generated et reference ; à vous de calculer le score.

La bibliothèque evaluate a été chargée pour vous.

Instructions

100 XP
  • Calculez et affichez le score METEOR.