La cohérence de soi pour évaluer la confiance en soi
Le site prompt
ci-dessous vise à demander à ChatGPT de classer le sentiment d'une critique. Vous devez estimer la confiance du ChatGPT dans chaque classe en utilisant l'autoconsistance.
La fonction get_response()
permettant de communiquer avec le ChatGPT est préchargée pour vous.
Cet exercice fait partie du cours
L'IA explicable en Python
Instructions
- Pour chaque examen, ajoutez le site
sentiment
à la listeresponses
. - Calculez la confiance pour chaque sentiment.
Exercice interactif pratique
Essayez cet exercice en complétant cet exemple de code.
prompt = """Classify the following review as positive or negative.
You should reply with either "positive" or "negative", nothing else.
Review: 'The coffee was excellent, but the service left much to be desired.'"""
responses = []
for i in range(5):
sentiment = get_response(prompt)
# Append the response to the responses list
____
# Compute the confidence for each sentiment
confidence = {
'positive': ____,
'negative': ____
}
print(confidence)