返回全部动态

llama.cpp b10984:CUDA 支持行连续 SUM_ROWS

原标题:b10984

llama.cpp Releases一手来源开源质量 65

AI 摘要

llama.cpp 发布 b10984 版本,主要更新为 CUDA 后端支持行连续的 SUM_ROWS 操作,并整理代码、新增 GGML_OP_MEAN 以复用同一共享内核处理行连续张量,同时为 MEAN 的 permute/slice 添加测试。该版本同步提供 macOS、Linux、Windows、Android 等多平台预编译二进制包。

以上摘要由 AI 生成,可能存在误差。事实请以原文为准。

正文节选

<details open> cuda: support row-contiguous SUM_ROWS (#26308) * cuda: support row-contiguous SUM_ROWS * organize the code and add GGML_OP_MEAN to support row-contiguous tensors using the same shared kernel, and add a test to MEAN permute/slice * Keep original comments and add if/else branch </details> **Website:** - <https://llama.app> **Attestations:** - <https://github.com/ggml-org/llama.cpp/attestations/47632927> **macOS/iOS:** - [macOS Apple Silicon (arm64)](https://github.com/ggml-o


发布时间:2026-09-15 21:41
抓取时间:2026-09-15 22:18
来源机构:ggml-org
阅读原文github.com