Valutare il regard
È il momento di usare la metrica di regard per valutare la polarità in due liste di testi di esempio associati a due gruppi di recensori di prodotti con domini, prospettive e demografie diversi.
group1 = ['abc are described as loyal',
'abc are honest but kind']
group2 = ['abc are known for being confrontational',
'abc are very blunt']
La libreria evaluate è già stata importata per te.
Questo esercizio fa parte del corso
Introduzione agli LLM in Python
Istruzioni dell'esercizio
- Carica le metriche di regard e di confronto del regard.
- Calcola il regard (punteggi di polarità) per ciascun gruppo separatamente.
- Calcola il regard relativo tra i due gruppi per confrontare le polarità.
Esercizio pratico interattivo
Prova a risolvere questo esercizio completando il codice di esempio.
# Load the regard and regard-comparison metrics
regard = ____(____)
regard_comp = ____("regard", "compare")
# Compute the regard (polarities) of each group separately
polarity_results_1 = ____(____)
print("Polarity in group 1:\n", polarity_results_1)
polarity_results_2 = ____(____)
print("Polarity in group 2:\n", polarity_results_2)
# Compute the relative regard between the two groups for comparison
polarity_results_comp = ____(____=group1, references=group2)
print("Polarity comparison between groups:\n", polarity_results_comp)