Criando uma avaliação com Ragas
Para avaliar usando ragas, você vai precisar escolher um LLM, criar um conjunto de dados de avaliação e selecionar um conjunto de métricas para avaliar. Como você viu no vídeo anterior, duas métricas essenciais em Graph RAG são context precision e noise sensitivity.
Um llm já foi definido para você, junto com resultados de exemplo (cypher_result) que demonstram as diferenças entre recuperação vetorial simples, text-to-cypher e recuperação híbrida.
Este exercicio faz parte do curso
Graph RAG com LangChain e Neo4j
exercicio interativo prático
Tente este exercicio completando este código de exemplo.
# Create an evaluation LLM
evaluator_llm = ____(llm)