返回全部动态
llama.cpp b10244 发布:MSA 迁移至新 KV 缓存实现
原标题:b10244
AI 摘要
llama.cpp 发布 b10244 版本,主要将 MSA(多头自注意力)逻辑从 llama-kv-cache 迁移到新的 llama-kv-cache-msa 实现中。该版本提供了适用于 macOS、Linux、Windows、Android 等多个平台的预编译二进制文件,并支持多种硬件加速后端。
以上摘要由 AI 生成,可能存在误差。事实请以原文为准。
正文节选
<details open> model: M3: Move MSA into a new memory implementation (#26338) * Move MSA logic from llama-kv-cache into llama-kv-cache-msa * cont : minor * cont : ws fix --------- Co-authored-by: Georgi Gerganov <ggerganov@gmail.com> </details> **Website:** - <https://llama.app> **macOS/iOS:** - [macOS Apple Silicon (arm64)](https://github.com/ggml-org/llama.cpp/releases/download/b10244/llama-b10244-bin-macos-arm64.tar.gz) - macOS Apple Silicon (arm64, KleidiAI enabled) [DISABLED](https:
发布时间:2026-08-04 06:13
抓取时间:2026-08-04 06:42
来源机构:ggml-org