Vytvoření Ragas hodnocení
Pro hodnocení pomocí ragas budeš muset zvolit LLM, vytvořit hodnotící dataset a vybrat sadu metrik, podle kterých se bude hodnotit. Jak ses dozvěděl/a v předchozím videu, dvě klíčové metriky Graph RAG jsou context precision a noise sensitivity.
K dispozici máš předem definovaný llm a ukázkové výsledky (cypher_result), které ukazují rozdíly mezi prostým vektorovým vyhledáváním, text-to-cypher a hybridním vyhledáváním.
Toto cvičení je součástí kurzu
Graph RAG s LangChain a Neo4j
Interaktivní cvičení na vyzkoušení si v praxi
Vyzkoušejte si toto cvičení dokončením tohoto ukázkového kódu.
# Create an evaluation LLM
evaluator_llm = ____(llm)