返回全部动态

DeepSeek 开源推理框架 DeepInfer,AI 编写算子同周登顶两大榜单

原标题:DeepSeek 开源看家算子的同一周,AI 超过了它

雷峰网 AI科技评论开源质量 67

AI 摘要

DeepSeek 全面开源推理框架 DeepInfer,继模型权重和 FlashMLA、DeepGEMM 等算子库之后,进一步开放模型运行链路;其 FlashMLA 人工手调版本算子性能达到硬件极限的 90% 以上。同一周内,完全由 AI 编写算子、无人工逐行调优的 ForgeKernel 同时登顶英伟达 SOL-ExecBench FlashInfer-Bench 与昇腾 CANNBench A3 硬件榜,基准加速比 1.835×,领先第二名 25%,并在 DeepSeek v4.1 Flash 算子上超越 DeepSeek 开源的英伟达版本。

以上摘要由 AI 生成,可能存在误差。事实请以原文为准。

正文节选

0 国产大模型的竞争,正从模型层延伸到算力层:再强的模型,最终都要基于算子在芯片上执行。同一个模型、同一块芯片,换一套更优的算子,有时会带来数倍的性能提升。算子的效率决定了同样的显卡能跑多快,也决定了每个 token 的价格。 DeepSeek 近日全面开源推理框架 DeepInfer。继模型权重和 FlashMLA、DeepGEMM 等算子库之后,他们把模型运行的链路开放了。其中的 FlashMLA,有工程师在芯片上逐行手调的版本,算子性能跑到了硬件极限的 90% 以上,这也是人类手艺目前在部分芯片上达到的极限成绩。 而这个极限,同一周就被 AI 刷新了。据悉,截至 10 月 22 日,完全由 AI 编写算子、无人工逐行调优的 ForgeKernel,同时登顶两个算子评测榜:英伟达主场的 SOL-ExecBench FlashInfer-Bench 合集第一,以及昇腾 CANN 官方仓库维护的 CANNBench A3 硬件榜第一,基准加速比 1.835×,领先第二名 25%。在名次之外,AI自主优化算子的能力不容小觑:在DeepSeek v4.1 Flash的算子上,相比DeepS


发布时间:2026-10-26 14:58
抓取时间:2026-10-26 16:59
来源机构:雷峰网
阅读原文leiphone.com