返回全部动态
llama.cpp 发布 b12084:LFM3 记录层输入以支持投机解码
原标题:b12084
AI 摘要
llama.cpp 发布 b12084 版本,主要变更为在 LFM3 中记录 layer inputs 以支持投机解码(spec dec)。该版本同步提供 macOS/iOS、Linux、Android、Windows 等多平台预编译包,覆盖 CUDA、Vulkan、ROCm、SYCL、OpenVINO、Snapdragon 等后端。此次更新属于开源推理框架的常规迭代,对使用 llama.cpp 进行本地推理和投机解码的用户有直接价值。
以上摘要由 AI 生成,可能存在误差。事实请以原文为准。
正文节选
<details open> model : record layer inputs in LFM3 for spec dec (#31598) </details> **Website:** - <https://llama.app> **Attestations:** - <https://github.com/ggml-org/llama.cpp/attestations/63354471> **macOS/iOS:** - [macOS Apple Silicon (arm64)](https://github.com/ggml-org/llama.cpp/releases/download/b12084/llama-b12084-bin-macos-arm64.tar.gz) - macOS Apple Silicon (arm64, KleidiAI enabled) [DISABLED](https://github.com/ggml-org/llama.cpp/pull/23780) - [macOS Intel (x64)](https://github.c
发布时间:2026-11-04 07:53
抓取时间:2026-11-04 08:21
来源机构:ggml-org