返回全部动态

llama.cpp b11755:修复 Metal 每 token 9 专家 MoE kernel

原标题:b11755

llama.cpp Releases一手来源开源质量 59

AI 摘要

llama.cpp 发布 b11755 版本,主要修复 Metal 后端在每 token 9 个专家场景下缺失的 MoE kernel 变体(#30610、#30699)。该版本同时提供 macOS/iOS、Linux、Android、Windows 等多平台预编译包,覆盖 CUDA、Vulkan、ROCm、SYCL、OpenVINO 等后端。此次修复提升了 Apple Silicon 上 MoE 模型推理的正确性与可用性。

以上摘要由 AI 生成,可能存在误差。事实请以原文为准。

正文节选

<details open> metal : fix missing MoE kernel variant for 9 experts per token (#30610) (#30699) </details> **Website:** - <https://llama.app> **Attestations:** - <https://github.com/ggml-org/llama.cpp/attestations/57761738> **macOS/iOS:** - [macOS Apple Silicon (arm64)](https://github.com/ggml-org/llama.cpp/releases/download/b11755/llama-b11755-bin-macos-arm64.tar.gz) - macOS Apple Silicon (arm64, KleidiAI enabled) [DISABLED](https://github.com/ggml-org/llama.cpp/pull/23780) - [macOS Intel


发布时间:2026-10-20 19:18
抓取时间:2026-10-20 20:05
来源机构:ggml-org
阅读原文github.com