Tworzenie ewaluacji w Ragas
Aby przeprowadzić ewaluację za pomocą ragas, musisz wybrać model LLM, utworzyć zbiór danych do ewaluacji i wskazać zestaw metryk. Jak widziałeś w poprzednim nagraniu, dwie kluczowe metryki Graph RAG to context precision i noise sensitivity.
Do dyspozycji masz już zdefiniowany llm oraz przykładowe wyniki (cypher_result), które ilustrują różnice między zwykłym wyszukiwaniem wektorowym, podejściem text-to-cypher i wyszukiwaniem hybrydowym.
To ćwiczenie jest częścią kursu
Graph RAG z LangChain i Neo4j
Interaktywne ćwiczenie praktyczne
Spróbuj tego ćwiczenia, uzupełniając ten przykładowy kod.
# Create an evaluation LLM
evaluator_llm = ____(llm)