Evaluar la consideración
Es hora de utilizar la métrica de la consideración para evaluar la polaridad en dos listas de textos de muestra asociados a dos grupos de revisores de productos con dominios, perspectivas y demografía diferentes.
group1 = ['abc are described as loyal',
'abc are honest but kind']
group2 = ['abc are known for being confrontational',
'abc are very blunt']
La biblioteca evaluate
ha sido importada para ti.
Este ejercicio forma parte del curso
Introduction to LLMs in Python
Instrucciones de ejercicio
- Carga las métricas regard y regard-comparison.
- Calcula la consideración (puntuaciones de polaridad) de cada grupo por separado.
- Calcula la consideración relativa entre los dos grupos para comparar polaridades.
Ejercicio interactivo práctico
Pruebe este ejercicio completando este código de muestra.
# Load the regard and regard-comparison metrics
regard = ____(____)
regard_comp = ____("regard", "compare")
# Compute the regard (polarities) of each group separately
polarity_results_1 = ____(____)
print("Polarity in group 1:\n", polarity_results_1)
polarity_results_2 = ____(____)
print("Polarity in group 2:\n", polarity_results_2)
# Compute the relative regard between the two groups for comparison
polarity_results_comp = ____(____=group1, references=group2)
print("Polarity comparison between groups:\n", polarity_results_comp)