1. Učit se
    2. /
  2. Kurzy
    3. /
  3. Deep Learning for Text with PyTorch
Connected

cvičení

Hodnocení předtrénovaného modelu pro generování textu

Tým PyBooks použil předtrénovaný model GPT-2, se kterým jsi experimentoval/a, k vygenerování textu na základě zadaného promptu. Teď chtějí kvalitu vygenerovaného textu vyhodnotit. Za tímto účelem tě pověřili hodnocením vygenerovaného textu v porovnání s referenčním textem.

BLEUScore a ROUGEScore už jsou načteny.

Pokyny

100 XP
  • Začni inicializací obou metrik (BLEU a ROUGE) dostupných z torchmetrics.text.
  • Pomocí inicializovaných metrik vypočítej skóre mezi vygenerovaným textem a referenčním textem.
  • Zobraz vypočítané hodnoty skóre BLEU a ROUGE.