返回全部动态

llama.cpp b11263:修复 PLaMo-2/3 词表 </s> 误判为 EOG

原标题:b11263

llama.cpp Releases一手来源开源质量 61

AI 摘要

llama.cpp 发布 b11263 版本,主要修复了 PLaMo-2 和 PLaMo-3 词表处理问题:这两个词表将 </s> 标记为 NORMAL,但现有 EOG token 启发式规则按文本匹配并把它归为 CONTROL,导致 </s> 被误判为 EOG。该版本对 PLAMO2 词表类型跳过此启发式,使 </s> 保持 NORMAL,并改用 <|plamo:eos|> 进行检测。同时照例提供 macOS、Linux、Windows、Android 等多平台预编译二进制包。

以上摘要由 AI 生成,可能存在误差。事实请以原文为准。

正文节选

<details open> vocab : keep </s> NORMAL in PLaMo-2 and PLaMo-3 (#29580) * vocab : keep </s> NORMAL in PLaMo-2 and PLaMo-3 The PLaMo-2 and PLaMo-3 vocabularies mark </s> as NORMAL. Current EOG token heuristic matched it by text and added its attribute to CONTROL. Skip this heuristic for the PLAMO2 vocab type so </s> stays NORMAL and is not treated as EOG. * use <|plamo:eos|> for detection </details> **Website:** - <https://llama.app> **Attestations:** - <https://github.com/ggml-org/llama.


发布时间:2026-09-30 06:31
抓取时间:2026-09-30 07:27
来源机构:ggml-org
阅读原文github.com