Carregando métricas com avaliação
São necessárias métricas para avaliar o desempenho dos LLMs, de forma semelhante aos modelos clássicos de aprendizado de máquina. A biblioteca evaluate ajuda você a entender as complexidades dos LLMs. Comece carregando as métricas que podem ser usadas para avaliar os modelos de classificação.
A biblioteca evaluate já foi carregada para você.
Este exercício faz parte do curso
Introdução aos LLMs em Python
Instruções do exercício
- Carregue as métricas de exatidão, precisão, recuperação e pontuação F1.
Exercício interativo prático
Experimente este exercício completando este código de exemplo.
# Load the metrics
accuracy = ____
precision = ____
recall = ___
f1 = ____