1. Learn
    2. /
  2. Cursuri
    3. /
  3. Introducere în LLM-uri cu Python
Connected

exercițiu

Evaluarea perplexității

Exersează generarea de text și evaluarea scorului de perplexitate.

Ți-a fost furnizat un input_text care reprezintă începutul unei propoziții: „Current trends show that by 2030 ".

Folosește un LLM pentru a genera restul propoziției.

Un model AutoModelForCausalLM și tokenizer-ul aferent au fost încărcate pentru tine ca variabilele model și tokenizer.

Instrucțiuni

100 XP
  • Codifică input_text și transmite-l modelului de generare a textului furnizat.
  • Încarcă și calculează scorul mean_perplexity pe textul generat.