1. Learn
  2. /
  3. 课程
  4. /
  5. Introducere în LLM-uri cu Python

Connected

道练习

Utilizarea metricilor din evaluate

Este momentul să evaluezi modelul LLM care clasifică interacțiunile cu suportul clienților. Pornind de la modelul tău ajustat, vei folosi acum un nou set de date de validare pentru a evalua performanța modelului.

Câteva interacțiuni și etichetele corespunzătoare au fost încărcate pentru tine ca validate_text și validate_labels. model și tokenizer sunt, de asemenea, încărcate.

说明

100 XP
  • Extrage etichetele prezise din logit-urile modelului, găsite în outputs.
  • Calculează cele patru metrici încărcate comparând etichetele reale (validate_labels) cu cele prezise.