返回全部动态

llama.cpp 发布 b11690:ngram 缓存改为按引用读取

原标题:b11690

llama.cpp Releases一手来源开源质量 55

AI 摘要

llama.cpp 发布 b11690 版本,主要变更是 common 模块中 ngram 缓存部分改为按引用读取而非复制(PR #30061),以提升效率。该版本同时提供 macOS/iOS、Linux、Android、Windows 等多平台预编译二进制包,覆盖 CPU、CUDA、Vulkan、ROCm、SYCL、OpenVINO 等后端。

以上摘要由 AI 生成,可能存在误差。事实请以原文为准。

正文节选

<details open> common : read ngram cache parts by reference instead of copying (#30061) </details> **Website:** - <https://llama.app> **Attestations:** - <https://github.com/ggml-org/llama.cpp/attestations/56620013> **macOS/iOS:** - [macOS Apple Silicon (arm64)](https://github.com/ggml-org/llama.cpp/releases/download/b11690/llama-b11690-bin-macos-arm64.tar.gz) - macOS Apple Silicon (arm64, KleidiAI enabled) [DISABLED](https://github.com/ggml-org/llama.cpp/pull/23780) - [macOS Intel (x64)](h


发布时间:2026-10-16 18:19
抓取时间:2026-10-16 19:04
来源机构:ggml-org
阅读原文github.com