1. Học hỏi
  2. /
  3. Khoa Học
  4. /
  5. Nhập môn LLMs trong Python

Connected

Bài tập

Đánh giá perplexity

Thử tự tay tạo văn bản và đánh giá điểm perplexity.

Bạn đã được cung cấp một input_text là phần mở đầu của câu: "Current trends show that by 2030 ".

Hãy dùng một LLM để tạo phần còn lại của câu.

Một mô hình AutoModelForCausalLM và tokenizer tương ứng đã được nạp sẵn vào các biến model và tokenizer.

Hướng dẫn

100 XP
  • Mã hóa input_text và truyền nó vào mô hình tạo văn bản đã cho.
  • Tải và tính điểm mean_perplexity trên văn bản đã tạo.