Creare una valutazione con Ragas
Per valutare con ragas, dovrai scegliere un LLM, creare un insieme di dati per la valutazione e selezionare un set di metriche su cui effettuare la valutazione. Come hai visto nel video precedente, due metriche chiave per Graph RAG sono context precision e noise sensitivity.
Un llm è già stato definito per te, insieme a dei risultati di esempio (cypher_result) che mostrano le differenze tra semplice recupero vettoriale, text-to-cypher e recupero ibrido.
Questo esercizio fa parte del corso
Graph RAG con LangChain e Neo4j
esercizio interattivo pratico
Prova questo esercizio completando questo codice di esempio.
# Create an evaluation LLM
evaluator_llm = ____(llm)