开始使用免费开始使用

与 Llama 3 对话

一家数据分析公司正在开发内部 AI 助手,帮助员工快速获取技术信息。作为该项目的一部分,他们希望集成 Llama 3,并请您进行测试。

首先,您将在本地初始化 Llama 3 模型,并针对一个问题生成回复。

模型路径已存为名为 llama_path 的变量。

本练习是课程的一部分

使用 Llama 3

查看课程

练习说明

  • llama_cpp 导入 Llama 类。
  • 初始化一个 Llama 实例,并将 llama_path 指定为模型文件的路径。

交互式实操练习

通过完成这段示例代码来试试这个练习。

# Import the Llama class
from llama_cpp import ____

# Initialize the Llama model
llm = ____(model_path=____)

question = "What is the most used database for data storage?"
response = llm(question)
print(response)
编辑并运行代码