1. Apprendre
    2. /
  2. Cours
    3. /
  3. Génération augmentée par la recherche (RAG) avec LangChain
Connected

Exercice

Évaluation de la précision du contexte avec Ragas

Pour amorcer votre parcours d'évaluation RAG, vous allez commencer par évaluer la précision du contexte à l'aide du cadre ragas. Rappelez-vous que la précision du contexte mesure essentiellement à quel point les documents récupérés sont pertinents par rapport à la requête d'entrée.

Dans cet exercice, on vous fournit une requête d'entrée, les documents récupérés par une application RAG, ainsi que la vérité terrain, soit le document le plus approprié à récupérer selon l'avis d'un expert humain. Vous calculerez la précision du contexte à partir de ces chaînes avant d'évaluer une véritable chaîne RAG LangChain dans l'exercice suivant.

Le texte généré par l'application RAG a été enregistré dans la variable model_response pour alléger l'exemple.

Instructions

100 XP
  • Définissez une chaîne de précision du contexte ragas.
  • Évaluez la précision du contexte des documents récupérés fournis pour la requête d'entrée; une "ground_truth" a déjà été fournie.