Créer une évaluation Ragas
Pour évaluer avec ragas, vous devrez choisir un LLM, créer un jeu de données d'évaluation et sélectionner un ensemble de mesures sur lesquelles évaluer. Comme vous l'avez vu dans la vidéo précédente, deux mesures clés pour le Graph RAG sont la précision du contexte et la sensibilité au bruit.
Un llm a été défini pour vous, ainsi que des résultats d'exemple (cypher_result) qui illustrent les différences entre la recherche vectorielle simple, le text-to-cypher et la recherche hybride.
Cette activité fait partie du cours
Graph RAG avec LangChain et Neo4j
Exercice interactif pratique
Essayez cet exercice en complétant ce code d’exemple.
# Create an evaluation LLM
evaluator_llm = ____(llm)