返回全部动态
llama.cpp b12196：SYCL 后端 CPY 对 Q4_1/Q5_1/Q8_0 精确舍入
原标题：b12196
AI 摘要
llama.cpp 发布构建版本 b12196，主要变更是 SYCL 后端在 CPY 操作中对 Q4_1、Q5_1 和 Q8_0 量化格式实现精确舍入（PR #31465）。该版本同时提供 macOS/iOS、Linux、Android、Windows 等多平台预编译包，覆盖 CUDA、Vulkan、ROCm、SYCL、OpenVINO 等后端。此次更新属于推理引擎的数值精度修复，有助于提升量化模型在 SYCL 设备上的拷贝结果一致性。
以上摘要由 AI 生成，可能存在误差。事实请以原文为准。
正文节选
<details open> sycl: exact rounding in CPY to Q4_1, Q5_1 and Q8_0 (#31465) </details> **Website:** - <https://llama.app> **Attestations:** - <https://github.com/ggml-org/llama.cpp/attestations/64960076> **macOS/iOS:** - [macOS Apple Silicon (arm64)](https://github.com/ggml-org/llama.cpp/releases/download/b12196/llama-b12196-bin-macos-arm64.tar.gz) - macOS Apple Silicon (arm64, KleidiAI enabled) [DISABLED](https://github.com/ggml-org/llama.cpp/pull/23780) - [macOS Intel (x64)](https://github
发布时间：2026-11-08 09:29
抓取时间：2026-11-08 09:47
来源机构：ggml-org