Comece agoraComece grátis

Criando uma avaliação com Ragas

Para avaliar usando ragas, você vai precisar escolher um LLM, criar um conjunto de dados de avaliação e selecionar um conjunto de métricas para avaliar. Como você viu no vídeo anterior, duas métricas essenciais em Graph RAG são context precision e noise sensitivity.

Um llm já foi definido para você, junto com resultados de exemplo (cypher_result) que demonstram as diferenças entre recuperação vetorial simples, text-to-cypher e recuperação híbrida.

Este exercicio faz parte do curso

Graph RAG com LangChain e Neo4j

Ver curso

exercicio interativo prático

Tente este exercicio completando este código de exemplo.

# Create an evaluation LLM
evaluator_llm = ____(llm)
Editar e Executar Código