返回全部动态

llama.cpp b11147:OpenCL 新增 A8 Q6_K dp4a 内核

原标题:b11147

llama.cpp Releases一手来源开源质量 61

AI 摘要

llama.cpp 发布 b11147 版本,主要变更为在 OpenCL 后端新增 A8 Q6_K 非 MoE 的 dp4a 二值化内核(PR #29057)。该版本同时提供覆盖 macOS/iOS、Linux、Android、Windows 及 openEuler 的多平台预编译二进制,涵盖 CPU、CUDA、Vulkan、ROCm、OpenVINO、SYCL 等后端。此次更新提升了 OpenCL 路径下量化推理的算子覆盖,属于面向本地推理框架的常规迭代。

以上摘要由 AI 生成,可能存在误差。事实请以原文为准。

正文节选

<details open> opencl: add A8 Q6_K non-MoE dp4a binary kernel (#29057) </details> **Website:** - <https://llama.app> **Attestations:** - <https://github.com/ggml-org/llama.cpp/attestations/49630180> **macOS/iOS:** - [macOS Apple Silicon (arm64)](https://github.com/ggml-org/llama.cpp/releases/download/b11147/llama-b11147-bin-macos-arm64.tar.gz) - macOS Apple Silicon (arm64, KleidiAI enabled) [DISABLED](https://github.com/ggml-org/llama.cpp/pull/23780) - [macOS Intel (x64)](https://github.com


发布时间:2026-09-24 03:03
抓取时间:2026-09-24 04:07
来源机构:ggml-org
阅读原文github.com