VOL. 2026-10-19 · 12 STORIES · DAILY INTELLIGENCE
AI HOT RADAR 日报
2026-10-19 · PUBLISHED · 约 10 分钟
当日最值得关注的变化是端侧与轻量化部署的集中推进:Google 发布…
当日最值得关注的变化是端侧与轻量化部署的集中推进:Google 发布可在手机和笔记本上运行的紧凑型开放权重多模态嵌入模型 EmbeddingGemma 2,面壁智能推出 MiniCPM-V 4.7 35B-A3B 的 int4 量化版,Gemma 4 E2B 也有了 LiteRT-LM 端侧打包版本,llama.cpp 则持续优化 Hexagon NPU 后端与 Qwen3 支持。研究侧的主线转向对智能体真实能力的检验与反思,BizBench 揭示长程智能体在商业部署中的合规短板,多智能体研究从理论上刻画歧视与极化的涌现,ReRankID 则暴露模型仅凭语义 ID 时照抄输入顺序的失败模式。此外,Event-STVG 将时空视频定位推向长视频事件推理,SGLang 与 Agno 的版本更新继续扩充模型与沙箱 Agent 的工程能力。
今日看点
3 个章节 · 12 条情报- 01研究进展Event-STVG:面向长视频事件推理的时空视频定位新基准4
- 02模型发布Gemma 4 E2B 推出 LiteRT-LM 端侧部署版本4
- 03开源项目SGLang v0.5.22 发布:新增多模型支持与推理性能提升4
研究进展
RESEARCH4 篇Event-STVG:面向长视频事件推理的时空视频定位新基准
清华大学THU-KEG团队提出Event-STVG新任务,将时空视频定位从描述引导的定位转向长视频事件推理,要求模型根据事件类别、发生次序和语义角色联合定位事件区间及参与者。团队构建了包含8个领域、4016个事件标注的基准,其中足球领域3516个事件。实验显示最强MLLM在10分钟上下文下仅达5.4% m-vIoU,暴露出重复同类事件混淆、空间定位瓶颈和多角色联合定位困难等问题。
仅用语义ID作为物品表示的推理重排序
该论文提出 ReRankID 测试平台,研究仅用语义 ID(SID)作为物品表示进行推理重排序。实验发现现有模型在仅见 SID 时倾向于照抄输入顺序而非真正重排序,可读元数据也无法修复该失败。作者比较了监督微调、拒绝采样自训练、在线策略蒸馏和基于验证器的强化学习等后训练方法,发现它们能激发缺失的重排序行为;其中用分级排序奖励训练的 8B 模型在仅 SID 条件下表现最佳,匹配了提示长数倍的强文本阅读 LLM,并在长历史下保持增益。但配对理由审计显示,该模型虽更善于论证权衡,对物品的描述却不够准确,说明后训练提升了排序而非推理本身。
多智能体系统中涌现的歧视与极化
该研究从理论上探讨学习型智能体群体中歧视与极化如何涌现。每个智能体用自适应线性决策层将语言模型嵌入映射为二元观点,并维护对其他智能体的信任估计,通过基于贝叶斯规则的成对交互更新权重与信任;大语言模型的上下文学习实验定性复现了预测的观点与信任更新。作者为智能体分配任意群体标签并引入偏见强度,利用统计力学序参量发现四种集体状态:无歧视极化、有观点对齐的歧视、无观点对齐的歧视以及外群体偏好的挫败态,具体状态取决于偏见的强度与普遍程度。研究强调多智能体系统需要群体层面的安全分析。
BizBench:揭示长程智能体在真实商业部署中的隐藏挑战
研究团队发布 BizBench,一个基于某领先支付公司真实业务流程构建的多轮长程智能体基准,包含 789 份知识文档、601 个可发现业务工具和 50 个任务,用于评估智能体在支付等高风险场景中的中间执行合规性。实验显示,前沿模型表现有限:Claude Opus 5 与 GPT-6 Sol 的严格成功率仅为 64.0% 和 61.3%,Qwen3.8-27B 目标达成率 42.0% 但严格成功率降至 32.7%,DeepSeek-V4.1-Flash 平均每次运行调用工具 191.3 次,比参考执行多约 70%。该基准揭示了仅看最终结果会掩盖无效执行的问题,推动长程智能体评估从任务完成转向约束合规的可靠执行。
模型发布
MODEL RELEASE4 篇Gemma 4 E2B 推出 LiteRT-LM 端侧部署版本
Hugging Face 上发布 litert-community/gemma-4-E2B-it-litert-lm,将 Google 的 Gemma 4 E2B 模型以 .litertlm 格式打包,可直接部署在 Android、iOS、桌面、IoT 和 Web 端。该版本基于 LiteRT-LM 框架,采用 2bit/4bit/8bit 混合量化,纯文本场景权重内存占用可低至 0.8GB,并支持视觉与音频模型按需加载以进一步节省内存。其目标是让用户在设备端离线运行生成式 AI,保障隐私且无需联网。
10Eros Max H3 激活引导学习量化版发布
开发者 LokkenJP 在 Hugging Face 发布 TenEros_Max_optimized_learned,这是基于 TenStrip/10Eros-Max 的 MiniMax-H3 文生视频模型的量化版本。推荐版本 Beta7 fix1 HQ 为 18.73 GB,采用激活引导学习量化(W6 g16 与 INT8 ConvRot),并保留内置八步 Turbo;另提供 14.65 GB 的原始 Beta7 compact 版本。作者称在 ComfyUI 测试中画质常优于同尺寸原生 INT8 版本,但属主观观察,未做受控基准测试。
MiniCPM-V 4.7 35B-A3B 发布 int4 量化版,主打端侧 MoE 推理
面壁智能(OpenBMB)在 Hugging Face 发布 MiniCPM-V 4.7 35B-A3B 的 int4 量化版本,基于压缩张量与 llm-compressor 实现 W4A16 量化。该模型是 MiniCPM-V 系列首个 MoE 多模态模型,借助 Lookahead Expert Scheduling、分层量化和 DSpark 投机采样,宣称成为首个可在端侧无损流畅运行的开源 MoE 模型,在 iPhone 17 Pro Max 上仅用 3GB 内存即可达到 13+ tokens/s 的解码速度。模型支持 iOS、Android、鸿蒙及多家芯片平台,并提供 GGUF、AWQ、GPTQ、FP8 等量化变体与主流推理、微调框架支持。
Google 发布 EmbeddingGemma 2:统一多模态嵌入空间
Google 发布 EmbeddingGemma 2,这是一个基于 Gemma 4、采用 Apache 2.0 许可的紧凑型开放权重多模态嵌入模型,可在手机和笔记本等消费级硬件上运行。其核心特性是将文本、代码、图像、视频和音频映射到统一的 768 维嵌入空间,使开发者无需为不同模态维护互不兼容的嵌入空间。模型支持按需加载编码器,参数量从 2.7 亿(文本和代码)扩展到 7.4 亿(完整多模态),并支持 Matryoshka 表示学习以截断向量、降低存储。模型已在 Hugging Face 上发布。
开源项目
OPEN SOURCE4 篇SGLang v0.5.22 发布:新增多模型支持与推理性能提升
SGLang 发布 v0.5.22 版本,包含来自 245 位贡献者的 950 个 PR。新增 Clef、PPLX-Decider、EmbeddingGemma 2、HunyuanImage-3.0-Instruct 等模型支持,DeepSeek-V4.1 在 H200 上吞吐提升最高 2.3 倍并支持 AMD MI350X/MI355X,InstantTensor 加载器使模型加载快 10 倍,PD 分离在长提示场景吞吐提升 27%。该版本还修复了混合线性模型在投机解码与结构化输出同用时的 mamba 状态恢复问题,并要求 Python 3.11 以上。
Agno v3.1.5:沙箱 Agent 支持仓库绑定与 S3 检查点
Agno 发布 v3.1.5,为沙箱化 Agent 新增仓库绑定能力:ClaudeAgent 与 CodexAgent 可通过 Repository 参数在指定仓库中启动会话,并固定 commit。同时新增 S3CheckpointStore 与 open_run_checkpoint,使沙箱检查点可存入 S3 兼容存储并跨副本复用。此外还加入 KeenableTools 无密钥网页搜索工具、按需触发的调度,并修复 FastAPI 0.147 表单默认值、无 Redis 沙箱运行等问题。
llama.cpp b11723:Hexagon FLASH_ATTN_EXT 长上下文与 SWA 优化
llama.cpp 发布 b11723 版本,主要针对 Hexagon 后端(高通 NPU)的 FLASH_ATTN_EXT 进行改进,以支持更长上下文和 SWA(滑动窗口注意力)模型。改动包括支持掩码块跳过以减少 DMA 数据搬运、微调 hmx 到 hvx 的切换阈值(提升 gemma-4 表现),以及更新 hmx 门控以考虑 mdev.count。该版本同时提供 macOS、Linux、Windows、Android 等多平台及多种后端(CUDA、Vulkan、ROCm、SYCL、OpenVINO 等)的预编译包。
llama.cpp b11729:Qwen3 支持双向注意力与 dense_2 输出投影
llama.cpp 发布 b11729 版本,为 Qwen3 模型新增双向注意力(bidirectional attention)与 dense_2 输出投影支持,并在转换脚本 base 中读取 use_bidirectional_attention 配置。该改动由社区贡献者提交、Grok 辅助完成,同时发布覆盖 macOS、Linux、Windows、Android 等多平台与 CUDA、Vulkan、ROCm、SYCL、OpenVINO 等后端的预编译包。