Fråga en foundation-modell
Nu ska vi använda det vi lärt oss om skillnaden mellan chatrollen "SYSTEM" och "USER" för att skicka olika promptar till AI-agenten beroende på vald chattroll.
Den här övningen är en del av kursen
Databricks med Python SDK
Övningsinstruktioner
- Be AI-agenten att agera som en gymnasielärare i datavetenskap när den besvarar frågor – använd prompten
ai_agent_context. - Fråga AI-agenten när man bör använda for-loopar med hjälp av
user_prompt.
Interaktiv övning med praktiskt arbete
Testa den här övningen genom att slutföra den här exempelkoden.
from databricks.sdk import WorkspaceClient
from databricks.sdk.service.serving import ChatMessage, ChatMessageRole
w = WorkspaceClient()
user_prompt = "What is a For loop and When should I use it?"
ai_agent_context = "You are a high school computer science teacher"
response = w.serving_endpoints.query(
name="databricks-meta-llama-3-3-70b-instruct",
messages=[
ChatMessage(
# Set system prompt
role=ChatMessageRole.SYSTEM, content=____
),
ChatMessage(
# Set user query
role=ChatMessageRole.USER, content=____
),
],
max_tokens=250)
print(f"RESPONSE:\n{response.choices[0].message.content}")