Creando una evaluación con Ragas
Para evaluar con ragas, tendrás que elegir un LLM, crear un conjunto de datos de evaluación y seleccionar un conjunto de métricas con las que evaluar. Como viste en el vídeo anterior, dos métricas clave de Graph RAG son el context precision y la noise sensitivity.
Se ha definido un llm para ti, junto con resultados de ejemplo (cypher_result) que muestran las diferencias entre la recuperación solo por vectores, text-to-cypher y la recuperación híbrida.
Este ejercicio forma parte del curso
Graph RAG con LangChain y Neo4j
ejercicio interactivo práctico
Prueba este ejercicio completando este código de ejemplo.
# Create an evaluation LLM
evaluator_llm = ____(llm)