1. Learn
    2. /
  2. Cursuri
    3. /
  3. Retrieval Augmented Generation (RAG) cu LangChain
Connected

exercițiu

Evaluarea preciziei contextului cu Ragas

Pentru a-ți începe parcursul de evaluare RAG, vei evalua metrica context precision (precizia contextului) folosind framework-ul ragas. Reamintește-ți că precizia contextului măsoară, în esență, cât de relevante sunt documentele recuperate față de interogarea de intrare.

În acest exercițiu, ți-au fost furnizate o interogare de intrare, documentele recuperate de o aplicație RAG și ground truth-ul – adică documentul considerat cel mai potrivit de către un expert uman. Vei calcula precizia contextului pe aceste șiruri de caractere, înainte de a evalua un lanț RAG LangChain propriu-zis în exercițiul următor.

Textul generat de aplicația RAG a fost salvat în variabila model_response pentru concizie.

Instrucțiuni

100 XP
  • Definește un lanț de precizie a contextului cu ragas.
  • Evaluează precizia contextului documentelor recuperate față de interogarea de intrare; "ground_truth"-ul a fost deja introdus.