返回全部动态
llama.cpp b10705 发布:改进 TENSOR_READ_LAZY 处理
原标题:b10705
AI 摘要
llama.cpp 发布 b10705 版本,主要改进了 TENSOR_READ_LAZY 处理逻辑,在启用 lazy 模式时强制 CPU 上的张量使用 lazy 加载。该版本提供了覆盖 macOS、Linux、Windows、Android 等多平台的预编译二进制文件,并支持多种后端如 Vulkan、CUDA、ROCm 等。
以上摘要由 AI 生成,可能存在误差。事实请以原文为准。
正文节选
<details open> llama: improve TENSOR_READ_LAZY handling (#27837) * force lazy tensor on cpu if lazy is on * llama: improve TENSOR_READ_LAZY handling </details> **Website:** - <https://llama.app> **Attestations:** - <https://github.com/ggml-org/llama.cpp/attestations/44015138> **macOS/iOS:** - [macOS Apple Silicon (arm64)](https://github.com/ggml-org/llama.cpp/releases/download/b10705/llama-b10705-bin-macos-arm64.tar.gz) - macOS Apple Silicon (arm64, KleidiAI enabled) [DISABLED](https://gi
发布时间:2026-08-31 07:15
抓取时间:2026-08-31 07:25
来源机构:ggml-org