LoslegenKostenlos starten

Bewertung mit EM

Exact Match hilft uns, Modelle mit extraktiven Frage-Antwort-Systemen zu bewerten und dabei – du kannst es dir vermutlich schon denken – nach exakten Übereinstimmungen zu suchen! Du erhältst hier wieder predictions und references, die du auswerten kannst. Die Bibliothek evaluate wurde bereits für dich geladen.

Diese Übung ist Teil des Kurses

<Kurs>Einführung in LLMs mit Python</Kurs>
Kurs ansehen

Übungsanweisungen

  • Lade die Metrik „Exact Match“.
  • Berechne den Exact-Match-Score und gib die Ergebnisse aus.

Interaktive praktische Übung

Versuche dich an dieser Übung, indem du diesen Beispielcode vervollständigst.

# Load the metric
exact_match = ___

predictions = ["It's a wonderful day", "I love dogs", "DataCamp has great AI courses", "Sunshine and flowers"]
references = ["What a wonderful day", "I love cats", "DataCamp has great AI courses", "Sunsets and flowers"]

# Compute the exact match and print the results
results = ____
print("EM results: ", ____)
Code bearbeiten und ausführen