Ragas इवैल्यूएशन बनाना
ragas का उपयोग करके इवैल्यूएट करने के लिए, आपको एक LLM चुनना होगा, एक इवैल्यूएशन डेटासेट बनाना होगा, और ऐसे मेट्रिक्स का सेट चुनना होगा जिनके आधार पर इवैल्यूएट किया जाएगा. जैसा कि आपने पिछले वीडियो में सीखा, दो प्रमुख Graph RAG मेट्रिक्स हैं: context precision और noise sensitivity.
आपके लिए एक llm परिभाषित किया गया है, साथ ही उदाहरण परिणाम (cypher_result) दिए गए हैं जो plain vector retrieval, text-to-cypher, और hybrid retrieval के बीच के अंतर दिखाते हैं.
यह अभ्यास पाठ्यक्रम का हिस्सा है
LangChain और Neo4j के साथ Graph RAG
इंटरैक्टिव व्यावहारिक अभ्यास
इस अभ्यास को इस नमूना कोड को पूरा करके आज़माएँ।
# Create an evaluation LLM
evaluator_llm = ____(llm)