你可以轻松地在你的机器上安装 llama.cpp:
- Mac 和 Windows: 安装 Llama app
- Linux(或如果你只需要命令行): 一行安装命令
Llama app(推荐)
下载适用于 Mac 或 Windows 11 的应用。它在 Mac 上位于菜单栏,在 Windows 上位于系统托盘。
该应用还会为你设置 llama 命令行,因此你可以在终端中使用 llama cli、llama serve 和其他工具。
一行安装
如果你在 Linux 上,或者只需要命令行,以下命令会检测你的平台,获取最新的 llama binary 并将其添加到你的 PATH。
在 Mac 和 Linux 上:
curl -LsSf https://llama.app/docs/install.sh | sh
在 Windows 上,使用 PowerShell:
irm https://llama.app/docs/install.ps1 | iex
其他安装方式
llama.cpp 也可以通过包管理器、预编译 binary 和 Docker images 获取,你也可以从源码构建它。请参阅 llama.cpp 的 installation 和 build 指南。
验证安装
如果你安装了应用,其图标会出现在菜单栏(Mac)或系统托盘(Windows)中。点击它以打开应用:
要检查命令行,请打开一个新的终端并运行:
llama cli --version
如果打印出版本和构建信息,说明你已准备就绪。
继续查看 Quickstart 以下载并运行你的第一个模型,或查看 Using Llama App with Agents 以将其与编码 agent 配对使用。