返回全部动态

llama.cpp b11564:Vulkan 优化 CM2 量化块大小

原标题:b11564

llama.cpp Releases一手来源开源质量 64

AI 摘要

llama.cpp 发布 b11564 版本,主要针对 Vulkan 后端进行优化:为 CM2 量化块大小做专门处理,并改用三元表达式避免 switch 语句降级,以提升 CM2 matmul 性能。该版本同时提供 macOS、Linux、Windows、Android 等多平台预编译二进制,覆盖 CUDA、ROCm、Vulkan、SYCL、OpenVINO 等后端。

以上摘要由 AI 生成,可能存在误差。事实请以原文为准。

正文节选

<details open> vulkan: use ternary expressions to avoid switch lowering for CM2 quant block size (#30164) * vulkan: specialize quant block size for CM2 matmul * vulkan: use ternary expressions to avoid switch lowering for CM2 quant block size * vulkan: clarify CM2 quant block size comment </details> **Website:** - <https://llama.app> **Attestations:** - <https://github.com/ggml-org/llama.cpp/attestations/54952894> **macOS/iOS:** - [macOS Apple Silicon (arm64)](https://github.com/ggml-org


发布时间:2026-10-12 14:56
抓取时间:2026-10-12 15:01
来源机构:ggml-org
阅读原文github.com