1. Học hỏi
    2. /
  2. Khoa Học
    3. /
  3. Retrieval Augmented Generation (RAG) với LangChain
Connected

Bài tập

Đánh giá context precision bằng Ragas

Để bắt đầu hành trình đánh giá RAG, bạn sẽ đánh giá context precision bằng framework ragas. Nhắc lại: context precision về cơ bản đo mức độ liên quan của các tài liệu truy xuất đối với truy vấn đầu vào.

Trong bài này, bạn được cung cấp một truy vấn đầu vào, các tài liệu do một ứng dụng RAG truy xuất, và ground truth, tức tài liệu phù hợp nhất cần truy xuất theo ý kiến của chuyên gia. Bạn sẽ tính context precision trên các chuỗi này trước khi đánh giá một chain RAG của LangChain ở bài tiếp theo.

Văn bản do ứng dụng RAG sinh ra đã được lưu vào biến model_response cho gọn.

Hướng dẫn

100 XP
  • Định nghĩa một context precision chain của ragas.
  • Đánh giá context precision của các tài liệu đã truy xuất đối với truy vấn đầu vào; "ground_truth" đã được cung cấp.