評価による負荷メトリクス
LLM の性能を評価するには、従来の機械学習モデルと同様に評価指標が必要です。evaluate ライブラリは、LLM の複雑さを理解するのに役立ちます。まずは、分類モデルの評価に使用できる指標を読み込むことから始めましょう。
なお、evaluate ライブラリはすでに読み込まれています。
この演習はコースの一部です
Python で学ぶ LLM の入門
演習の手順
- 正解率、適合率、再現率、F1スコアのメトリクスを読み込む。
実践的なインタラクティブ演習
このサンプルコードを完成させて、この演習に挑戦してみましょう。
# Load the metrics
accuracy = ____
precision = ____
recall = ___
f1 = ____