1. Nauka
    2. /
  2. Kursy
    3. /
  3. Uczenie głębokie dla tekstu z PyTorch
Connected

ćwiczenie

Ocena wstępnie wytrenowanego modelu do generowania tekstu

Zespół PyBooks skorzystał ze wstępnie wytrenowanego modelu GPT-2, z którym wcześniej eksperymentowałeś, aby wygenerować tekst na podstawie podanego promptu. Teraz chce ocenić jakość wygenerowanego tekstu. Twoim zadaniem jest porównanie go z tekstem referencyjnym.

BLEUScore i ROUGEScore zostały już załadowane.

Instrukcje

100 XP
  • Zainicjalizuj obie metryki (BLEU i ROUGE) dostępne w torchmetrics.text.
  • Użyj zainicjalizowanych metryk, aby obliczyć wyniki dla wygenerowanego tekstu i tekstu referencyjnego.
  • Wyświetl obliczone wartości metryk BLEU i ROUGE.