返回全部动态

AgentionAI 发布 Qwen3.8-27B 高保真 GGUF 量化包

原标题:agentionai/Qwen3.8-27B-AP-GGUF

Hugging Face New and Trending Models一手来源开源质量 46

AI 摘要

AgentionAI 在 Hugging Face 发布 Qwen3.8-27B 的 Agention Precision GGUF 量化包,声称在相同文件大小和推理速度下,比 Unsloth、ISTA-DASLab、AtomicChat 等公开量化版本更接近 Qwen 原版 BF16 模型的下一 token 分布。该量化包基于 llama.cpp 标准格式,无需 fork 或额外参数,包含视觉投影器和 MTP 草稿头,并提供从 Q4 到 IQ2 的多个尺寸档位。作者公开了 KL 散度评测方法和部分语料,便于复现对比。

以上摘要由 AI 生成,可能存在误差。事实请以原文为准。

正文节选

--- base_model: - Qwen/Qwen3.8-27B base_model_relation: quantized license: apache-2.0 library_name: gguf pipeline_tag: image-text-to-text tags: - gguf - qwen3.8-27b - imatrix - agentionai --- # Qwen3.8-27B · Agention Precision GGUF [![Sponsor](https://img.shields.io/badge/Sponsor-GitHub%20Sponsors-ea4aaa?logo=githubsponsors&logoColor=white)](https://github.com/sponsors/agentionai) [![View results on Fieldwork Ledger](https://share.fieldworkledger.com/jWO2-ae4HyoC6GIqZucsaA/badge.svg)](https://


发布时间:2026-10-24 04:19
抓取时间:2026-09-25 05:57
来源机构:Hugging Face
阅读原文huggingface.co