1. Learn
    2. /
  2. Курси
    3. /
  3. Вступ до LLM у Python
Connected

вправа

Оцінювання перплексії

Спробуйте згенерувати текст і оцінити показник перплексії.

Вам надано input_text, який є початком речення: "Current trends show that by 2030 ".

Використайте LLM, щоб згенерувати продовження речення.

Модель AutoModelForCausalLM і її токенайзер уже завантажені у змінні model та tokenizer.

Інструкції

100 XP
  • Закодуйте input_text і передайте його до наданої моделі для генерування тексту.
  • Завантажте та обчисліть показник mean_perplexity для згенерованого тексту.