返回全部动态
llama.cpp b10670 发布:BMG 架构启用 TILE 量化 KV 解码
原标题:b10670
AI 摘要
llama.cpp 发布 b10670 版本,主要更新为在 Intel Xe2 (BMG) 架构上使用 TILE 指令集进行量化 KV 解码,其他架构仍使用 VEC。该版本提供了适用于 macOS、Linux、Windows、Android 等多个平台的二进制文件,并支持多种后端如 Vulkan、CUDA、ROCm、OpenVINO 和 SYCL。
以上摘要由 AI 生成,可能存在误差。事实请以原文为准。
正文节选
<details open> sycl: use TILE for quantized KV decode on BMG (#26689) Route quantized KV decode to TILE on Xe2 (BMG) only, keep VEC on other archs until validated there. </details> **Website:** - <https://llama.app> **Attestations:** - <https://github.com/ggml-org/llama.cpp/attestations/43660247> **macOS/iOS:** - [macOS Apple Silicon (arm64)](https://github.com/ggml-org/llama.cpp/releases/download/b10670/llama-b10670-bin-macos-arm64.tar.gz) - macOS Apple Silicon (arm64, KleidiAI enabled) [
发布时间:2026-08-28 21:12
抓取时间:2026-08-28 22:08
来源机构:ggml-org