De kosten berekenen
Voordat je AI-functies op grote schaal uitrolt, is het belangrijk om de kosten te schatten. Die hangen af van het aantal invoer- en uitvoertokens dat je gebruikt en het geselecteerde model.
Jouw taak is om de kosten te berekenen van het samenvatten van klantchats.
De OpenAI-client, samen met text, prompt en max_completion_tokens, zijn alvast voor je ingeladen.
Deze oefening maakt deel uit van de cursus
Werken met de OpenAI API
Oefeninstructies
- Haal het gebruik van invoertokens uit de
response. - Maak de kostencalculatie af door de kosten van uitvoertokens toe te voegen.
Praktische interactieve oefening
Probeer deze oefening eens door deze voorbeeldcode in te vullen.
client = OpenAI(api_key="")
response = client.chat.completions.create(
model="gpt-4o-mini",
messages=[{"role": "user", "content": prompt}],
max_completion_tokens=max_completion_tokens
)
input_token_price = 0.15 / 1_000_000
output_token_price = 0.6 / 1_000_000
# Extract token usage
input_tokens = response.____.____
output_tokens = max_completion_tokens
# Calculate cost
cost = (input_tokens * input_token_price + ____ * ____)
print(f"Estimated cost: ${cost}")