Évaluation du regard
Il est temps d'utiliser la métrique du regard pour évaluer la polarité dans deux listes d'exemples de textes associés à deux groupes d'évaluateurs de produits ayant des domaines, des perspectives et des données démographiques différents.
group1 = ['abc are described as loyal',
'abc are honest but kind']
group2 = ['abc are known for being confrontational',
'abc are very blunt']
La bibliothèque evaluate a été importée pour vous.
Cet exercice fait partie du cours
Introduction aux LLM en Python
Instructions
- Chargez les métriques de regard et de comparaison de regard.
- Calculez le regard (scores de polarité) pour chaque groupe séparément.
- Calculez le regard relatif entre les deux groupes pour comparer les polarités.
Exercice interactif pratique
Essayez cet exercice en complétant cet exemple de code.
# Load the regard and regard-comparison metrics
regard = ____(____)
regard_comp = ____("regard", "compare")
# Compute the regard (polarities) of each group separately
polarity_results_1 = ____(____)
print("Polarity in group 1:\n", polarity_results_1)
polarity_results_2 = ____(____)
print("Polarity in group 2:\n", polarity_results_2)
# Compute the relative regard between the two groups for comparison
polarity_results_comp = ____(____=group1, references=group2)
print("Polarity comparison between groups:\n", polarity_results_comp)