FinHot.

FINHOT / AI 与硬科技 / 论文研究

机器之心文章关注千万 token 上下文下的注意力效率,标题称比 DeepSeek 式稀疏注意力快 22 倍

机器之心

机器之心 2026 年 11 月 17 日的文章讨论超长上下文中的注意力效率。文中提到,DeepSeek-V4 于 4 月将 1M 上下文设为所有官方服务的默认规格;智谱 8 月发布的 GLM-5.3-Flash 同样支持 1M 上下文,并首次在 GLM 系列中引入稀疏注意力与线性注意力的混合架构。

信源原题:千万token下,比DeepSeek式稀疏注意力再快22倍

阅读来源原文 ↗

摘要供资讯阅读参考,请核对原文。 反馈与更正 →

返回相关资讯 →