返回全部动态

AgentionAI 发布 Qwen3.8-27B 高保真 GGUF 量化

原标题:agentionai/Qwen3.8-27B-AP-GGUF

Hugging Face New and Trending Models一手来源开源质量 47

AI 摘要

AgentionAI 在 Hugging Face 发布 Qwen3.8-27B 的 Agention Precision GGUF 量化包,基于 Qwen/Qwen3.8-27B 量化,采用非均匀分配与低损失纠错编码,兼容标准 llama.cpp 无需分支或额外参数,并包含视觉投影器和 MTP 草稿头。作者称在相同文件大小、速度和显存下,各档位量化相比 Unsloth 等公开 GGUF 更接近 BF16 原始模型的下一 token 分布,并公开了 KL 散度评测协议与复现命令。

以上摘要由 AI 生成,可能存在误差。事实请以原文为准。

正文节选

--- base_model: - Qwen/Qwen3.8-27B base_model_relation: quantized license: apache-2.0 library_name: gguf pipeline_tag: image-text-to-text tags: - gguf - qwen3.8-27b - imatrix - agentionai --- # Qwen3.8-27B · Agention Precision GGUF [![Sponsor](https://img.shields.io/badge/Sponsor-GitHub%20Sponsors-ea4aaa?logo=githubsponsors&logoColor=white)](https://github.com/sponsors/LaurentZuijdwijk) **Same size. Same speed. Closer to the model Qwen trained than any other quant** ![Lower KL at the same G


发布时间:2026-09-25 13:59
抓取时间:2026-09-25 05:57
来源机构:Hugging Face
阅读原文huggingface.co