Začněte nyníZačněte zdarma

Vyhodnocení pomocí EM

Exact Match slouží k vyhodnocování modelů pro extraktivní odpovídání na otázky – hledá, jak název napovídá, přesné shody! Stejně jako dříve máš k dispozici předpovědi predictions a reference references pro vyhodnocení. Knihovna evaluate je už načtená.

Toto cvičení je součástí kurzu

Úvod do LLMs v Pythonu

Zobrazit kurz

Pokyny k cvičení

  • Načti metriku Exact Match.
  • Vypočítej skóre Exact Match a výsledky vypiš.

Interaktivní cvičení na vyzkoušení si v praxi

Vyzkoušejte si toto cvičení dokončením tohoto ukázkového kódu.

# Load the metric
exact_match = ___

predictions = ["It's a wonderful day", "I love dogs", "DataCamp has great AI courses", "Sunshine and flowers"]
references = ["What a wonderful day", "I love cats", "DataCamp has great AI courses", "Sunsets and flowers"]

# Compute the exact match and print the results
results = ____
print("EM results: ", ____)
Upravit a spustit kód