1. Học hỏi
    2. /
  2. Khoa Học
    3. /
  3. Nhập môn LLMs trong Python
Connected

Bài tập

Đánh giá với ROUGE

ROUGE thường được dùng để đánh giá bài toán tóm tắt vì nó kiểm tra mức độ tương đồng giữa dự đoán và tham chiếu. Bạn đã được cung cấp một bản tóm tắt do mô hình sinh ra, predictions, và một bản tóm tắt references để đối chiếu. Hãy tính điểm để xem mô hình hoạt động tốt đến mức nào.

Thư viện evaluate đã được nạp sẵn cho bạn.

Hướng dẫn

100 XP
  • Tải chỉ số ROUGE.
  • Tính điểm ROUGE giữa bản tóm tắt dự đoán và bản tóm tắt tham chiếu.