Avaliando a consideração
É hora de usar a métrica de consideração para avaliar a polaridade em duas listas de textos de amostra associados a dois grupos de avaliadores de produtos com diferentes domínios, perspectivas e dados demográficos.
group1 = ['abc are described as loyal',
'abc are honest but kind']
group2 = ['abc are known for being confrontational',
'abc are very blunt']
A biblioteca evaluate foi importada para você.
Este exercício faz parte do curso
Introdução aos LLMs em Python
Instruções do exercício
- Carregue as métricas de consideração e comparação de consideração.
- Calcule a consideração (pontuações de polaridade) para cada grupo separadamente.
- Calcule a relação relativa entre os dois grupos para comparar as polaridades.
Exercício interativo prático
Experimente este exercício completando este código de exemplo.
# Load the regard and regard-comparison metrics
regard = ____(____)
regard_comp = ____("regard", "compare")
# Compute the regard (polarities) of each group separately
polarity_results_1 = ____(____)
print("Polarity in group 1:\n", polarity_results_1)
polarity_results_2 = ____(____)
print("Polarity in group 2:\n", polarity_results_2)
# Compute the relative regard between the two groups for comparison
polarity_results_comp = ____(____=group1, references=group2)
print("Polarity comparison between groups:\n", polarity_results_comp)