1. Học hỏi
    2. /
  2. Khoa Học
    3. /
  3. Deep Learning cho Văn bản với PyTorch
Connected

Bài tập

Đánh giá mô hình sinh văn bản đã được huấn luyện sẵn

Nhóm PyBooks đã dùng mô hình GPT-2 đã được huấn luyện sẵn mà bạn vừa thử nghiệm để sinh văn bản từ một prompt cho trước. Giờ họ muốn đánh giá chất lượng của văn bản đã sinh. Để làm được điều đó, họ giao cho bạn nhiệm vụ đánh giá văn bản sinh ra bằng cách so sánh với một văn bản tham chiếu.

BLEUScore, ROUGEScore đã được nạp sẵn cho bạn.

Hướng dẫn

100 XP
  • Bắt đầu bằng cách khởi tạo hai độ đo (BLEU và ROUGE) từ torchmetrics.text.
  • Dùng các độ đo đã khởi tạo để tính điểm giữa văn bản sinh ra và văn bản tham chiếu.
  • Hiển thị điểm BLEU và ROUGE đã tính.