Ragas を使ったコンテキスト取得の評価
データセットを用意し、評価指標を選んだので、いよいよ評価を実行します。
前の演習で作成した cypher_dataset と metrics のリストは引き続き利用できます。
この演習はコースの一部です
Graph RAG with LangChain and Neo4j
演習の手順
- 指標のリスト(
metrics)を使ってcypher_datasetを評価し、参照なしの content-precision と noise sensitivity を計算します。
実践的なインタラクティブ演習
このサンプルコードを完成させて、この演習に挑戦してみましょう。
# Evaluate the retrieval
cypher_scores = ____(
____=cypher_dataset,
____=metrics,
)
print(cypher_scores)