返回全部动态
llama.cpp b10357 发布:OpenCL FA prefill 内核优化
原标题:b10357
AI 摘要
llama.cpp 发布 b10357 版本,主要更新为在 OpenCL 的 FA prefill 内核中于本地内存转置 K 矩阵,以提升性能。该版本提供了适用于 macOS、Linux、Windows、Android 等多个平台的预编译二进制文件,并支持多种后端如 CUDA、Vulkan、ROCm 等。
以上摘要由 AI 生成,可能存在误差。事实请以原文为准。
正文节选
<details open> opencl: transpose the K tile in local memory for FA prefill kernels (#26428) </details> **Website:** - <https://llama.app> **macOS/iOS:** - [macOS Apple Silicon (arm64)](https://github.com/ggml-org/llama.cpp/releases/download/b10357/llama-b10357-bin-macos-arm64.tar.gz) - macOS Apple Silicon (arm64, KleidiAI enabled) [DISABLED](https://github.com/ggml-org/llama.cpp/pull/23780) - [macOS Intel (x64)](https://github.com/ggml-org/llama.cpp/releases/download/b10357/llama-b10357-bin-
发布时间:2026-08-11 13:17
抓取时间:2026-08-11 13:21
来源机构:ggml-org