CommencezCommencez gratuitement

Évaluer avec EM

Exact Match nous aide à évaluer les modèles pour les tâches d'extraction de questions-réponses en recherchant, comme son nom l'indique, des correspondances exactes. Une fois de plus, on vous fournit des predictions et des references pour l'évaluation. La bibliothèque evaluate a été chargée pour vous.

Cette activité fait partie du cours

Introduction aux LLM avec Python

Voir le cours

Instructions de l’exercice

  • Chargez la métrique Exact Match.
  • Calculez le score Exact Match et affichez les résultats.

Exercice interactif pratique

Essayez cet exercice en complétant ce code d’exemple.

# Load the metric
exact_match = ___

predictions = ["It's a wonderful day", "I love dogs", "DataCamp has great AI courses", "Sunshine and flowers"]
references = ["What a wonderful day", "I love cats", "DataCamp has great AI courses", "Sunsets and flowers"]

# Compute the exact match and print the results
results = ____
print("EM results: ", ____)
Modifier et exécuter le code