返回全部动态

llama.cpp 发布 b12242:修复 tools 与 response_format 下的 lazy grammar

原标题:b12242

llama.cpp Releases一手来源开源质量 56

AI 摘要

llama.cpp 发布构建版本 b12242,主要变更是 chat 模块在设置了 response_format 且同时使用 tools 时不再使用 lazy grammar(PR #31956)。该版本同时提供 macOS/iOS、Linux(含 CUDA、ROCm、Vulkan、SYCL、OpenVINO 等后端)、Android、Windows 及 UI 的多平台预编译包。此次更新属于推理框架的细节修复与常规构建发布,影响使用结构化输出与工具调用的本地推理用户。

以上摘要由 AI 生成,可能存在误差。事实请以原文为准。

正文节选

<details open> chat : don't use lazy grammar when response_format is set with tools (#31956) </details> **Website:** - <https://llama.app> **Attestations:** - <https://github.com/ggml-org/llama.cpp/attestations/65619172> **macOS/iOS:** - [macOS Apple Silicon (arm64)](https://github.com/ggml-org/llama.cpp/releases/download/b12242/llama-b12242-bin-macos-arm64.tar.gz) - macOS Apple Silicon (arm64, KleidiAI enabled) [DISABLED](https://github.com/ggml-org/llama.cpp/pull/23780) - [macOS Intel (x6


发布时间:2026-11-10 10:01
抓取时间:2026-11-10 10:36
来源机构:ggml-org
阅读原文github.com