Interogarea unui model de bază
Să aplicăm ceea ce am învățat despre diferența dintre rolurile de mesaj „SYSTEM" și „USER" pentru a trimite prompturi diferite agentului AI în funcție de rolul mesajului.
Acest exercițiu face parte din cursul
Databricks cu Python SDK
Instrucțiuni pentru exercițiu
- Spune-i agentului AI să se comporte ca un profesor de informatică de liceu atunci când răspunde la întrebări, folosind promptul
ai_agent_context. - Întreabă agentul AI când să folosești buclele For, utilizând
user_prompt.
Exercițiu interactiv practic
Încearcă acest exercițiu completând acest cod de exemplu.
from databricks.sdk import WorkspaceClient
from databricks.sdk.service.serving import ChatMessage, ChatMessageRole
w = WorkspaceClient()
user_prompt = "What is a For loop and When should I use it?"
ai_agent_context = "You are a high school computer science teacher"
response = w.serving_endpoints.query(
name="databricks-meta-llama-3-3-70b-instruct",
messages=[
ChatMessage(
# Set system prompt
role=ChatMessageRole.SYSTEM, content=____
),
ChatMessage(
# Set user query
role=ChatMessageRole.USER, content=____
),
],
max_tokens=250)
print(f"RESPONSE:\n{response.choices[0].message.content}")