Créer une évaluation Ragas
Pour évaluer avec ragas, vous devez choisir un LLM, créer un jeu de données d’évaluation et sélectionner un ensemble de métriques à appliquer. Comme vous l’avez vu dans la vidéo précédente, deux métriques clés pour Graph RAG sont la précision du contexte et la sensibilité au bruit.
Un llm a été défini pour vous, ainsi que des résultats d’exemple (cypher_result) qui illustrent les différences entre la recherche vectorielle simple, le text-to-cypher et la recherche hybride.
Cet exercice fait partie du cours
<cours>Graph RAG avec LangChain et Neo4j</cours>Exercice interactif pratique
Essayez cet exercice en complétant ce code d’exemple.
# Create an evaluation LLM
evaluator_llm = ____(llm)