開始使用免費開始

與 Llama 3 對話

一家資料分析公司正在開發內部的 AI 助理,協助員工快速查詢技術資訊。作為此專案的一部分,他們想整合 Llama 3,並請你進行測試。

為了開始,你會在本機初始化 Llama 3 模型,並針對一個問題產生回應。

模型路徑已儲存在名為 llama_path 的變數中。

本練習屬於課程

使用 Llama 3

檢視課程

練習說明

  • llama_cpp 匯入 Llama 類別。
  • 初始化一個 Llama 執行個體,並將 llama_path 指定為模型檔案的路徑。

動手互動練習

試著完成這個範例程式碼,體驗一下這個練習。

# Import the Llama class
from llama_cpp import ____

# Initialize the Llama model
llm = ____(model_path=____)

question = "What is the most used database for data storage?"
response = llm(question)
print(response)
編輯並執行程式碼