梁文锋署名!DeepSeek发表重磅论文:如何让大模型跑得更快
创始人
2026-06-29 09:10:05
0

快科技6月28日消息,当行业在讨论谁的模型更聪明时,DeepSeek仍然把目光投向更现实的问题:如何让大模型跑得更快。

昨日,DeepSeek官方在Github低调发表了一篇最新论文,介绍其推理加速框架DSpark,试图解决大语言模型在高并发场景下的推理效率瓶颈。

从作者署名来看,这篇论文由DeepSeek与北京大学联合发布,值得注意的是,DeepSeek创始人梁文锋也位列作者名单。

在论文中,团队开源了DSpark模型权重,并同步发布了面向推测解码、由算法驱动的训练代码仓库DeepSpec。

DeepSeek首先解释了需要解决的问题。大语言模型采用自回归方式生成文本:每一个新词元的生成,都需要基于全部前置词元完成一次完整前向传播,结果是输出越长,等待越久。

由此带来GPU利用率低下、用户等待时间过长的问题,这是大语言模型线上服务的核心性能瓶颈,在实时对话助手、多轮智能体工作流等低时延敏感场景中尤为突出。

目前的主流方案分为自回归草稿模型(Eagle3)、并行草稿模型(DFlash)两条路线,二者各有缺陷,包括生成质量瓶颈和系统效率瓶颈等,且现有方案均缺乏负载自适应校验机制。

基于此,DeepSeek提出DSpark推测解码框架,采用半自回归生成架构:保留并行主干的高吞吐优势,同时加入轻量级串行模块,逐词元注入前缀依赖信息。

该模块提供两种实现——仅依赖前一个词元的马尔可夫头,以及通过循环状态累积完整前缀信息的RNN头。

实验表明,两层Transformer深度的DSpark即可在所有测试领域超过五层DFlash的接受长度。

目前,DeepSeek已经将DSpark部署到DeepSeek-V4在线服务系统中,并基于真实用户流量评估其实际性能。

结果显示,相较于现有生产环境基线系统MTP-1,在相同吞吐量条件下,DSpark将用户端生成速度提升了60%-85%。

此外,DeepSeek也将这一框架部署在其他模型上,以阿里旗下的Qwen3-4B、8B、14B三个模型为例,相较于自回归草稿模型,DSpark平均单轮可接受词元长度分别提升了30.9%、26.7%、30%;相较于并行草稿模型,DSpark分别提升了16.3%、18.4%、18.3%。

相关内容

热门资讯

美联储释放“鹰派”信号,本周金... 6月20日消息,受美元走强等因素推动,国际金价和银价周五下跌。纽约商品交易所8月交割的黄金期货价格尾...
欧盟峰会聚焦安全、扩员等多项议... 6月20日消息,当地时间6月18日至19日,欧盟成员国领导人在布鲁塞尔举行峰会。除讨论总额约2万亿欧...
消息称又一名内阁大臣敦促英国首... 6月20日消息,据英国方面19日消息,英国交通大臣海迪·亚历山大当天敦促英国首相斯塔默制定离任时间表...
伊朗副外长:美国必须确保以色列... 6月20日消息,伊朗外交部副部长赛义德·哈提卜扎德在接受采访时表示,美国必须确保以色列遵守美伊之间达...
埃及外长称将与沙特、土耳其和巴... 6月20日消息,埃及外交部19日发表声明说,埃及外长将于21日与沙特阿拉伯外交大臣、土耳其外长和巴基...
从地心矿藏到未来奇境,从一针一... 展览吸引了大量观众打卡。 展览吸引了大量观众打卡。 西普尼带来的“非遗十二时辰”系列腕表之《竹韵...
一根特殊丝线,如何牵出1800... 今晚九点半 某纺织公司的“徐总” 询价干脆 小额定金总是秒到账 于是李老板发出了 价值300万元的布...
海外主要央行货币政策为何分化? 6月中旬,美联储、欧洲央行、日本央行等海外主要经济体央行密集公布最新利率决议。笔者注意到,面对不同的...
今晚,“苏超”淮安主场,天“码... 以体育赛事为流量入口,用数字科技激活消费潜能。今晚,“苏超”淮安队主场迎战无锡队。中场休息时段,12...
东风奕派M8如果正式上市让我来... 东风奕派M8正式开启预售,预售价19.98万元起,不过,对于这个价位我持保留意见! 原本我心理预期...