Auswerten mit EM
Exact Match hilft uns bei der Bewertung von Modellen, wenn es um die extraktive Beantwortung von Fragen geht, und sucht nach, du hast es erraten, exakten Übereinstimmungen! Wieder einmal hast du einige predictions
und references
zur Bewertung zur Verfügung gestellt bekommen. Die Bibliothek evaluate
wurde für dich geladen.
Diese Übung ist Teil des Kurses
Einführung in LLMs in Python
Anleitung zur Übung
- Lade die Exact Match Metrik.
- Berechne den Exact Match Score und drucke die Ergebnisse aus.
Interaktive Übung zum Anfassen
Probieren Sie diese Übung aus, indem Sie diesen Beispielcode ausführen.
# Load the metric
exact_match = ___
predictions = ["It's a wonderful day", "I love dogs", "DataCamp has great AI courses", "Sunshine and flowers"]
references = ["What a wonderful day", "I love cats", "DataCamp has great AI courses", "Sunsets and flowers"]
# Compute the exact match and print the results
results = ____
print("EM results: ", ____)