DeepSeek 又扔出一颗核弹:dSpark 让大模型推理提速 85%,还完全开源

DeepSeek 开源 dSpark 投机解码框架,不换模型不改硬件,推理速度提升 60%-85%

DeepSeek 又扔出一颗核弹:dSpark 让大模型推理提速 85%,还完全开源 封面图

不换模型、不重训练、不改硬件,DeepSeek 仅靠一个推理加速模块就把 V4 的用户生成速度提升了 60%–85%。

2026 年 7 月 3 日,AI 频道 AI Search(69.4 万订阅)发布了一条爆炸性视频:DeepSeek 再次放出重大突破——dSpark。这并非一个新的模型,而是一个投机解码(Speculative Decoding)框架,能让已有的大语言模型在不做任何重训练、不改变模型权重的前提下,推理速度提升 50%–400%。

消息一出,整个 AI 社区沸腾了。因为这意味着:你不需要换模型,就能让现有模型跑得更快、更便宜、更稳定。

一、大模型为什么这么慢?

要理解 dSpark 的价值,先要理解大模型推理的瓶颈。

大语言模型生成文本的方式是自回归(Autoregressive):每生成一个 token(可以理解为"一个字"),都需要做一次完整的前向传播。也就是说,生成 1000 个字的回答,就要跑 1000 次模型推理。

问题在于:GPU 的计算速度远快于内存带宽。每次推理的大部分时间其实花在从显存读取模型参数上,而不是花在实际计算上。这就导致了 GPU 利用率极低——你可能花 95% 的时间在等数据,只有 5% 的时间在做真正的计算。

更糟糕的是,对于长回复场景,用户的等待时间线性增长。这在实时对话助手和多轮 Agent 工作流中,是最主要的性能瓶颈。

二、投机解码:一个聪明的"作弊"方案

投机解码(Speculative Decoding)的思路很巧妙:让一个小模型先快速"打草稿",大模型再批量验证。

投机解码流程图:小模型起草 → 大模型批量验证

具体来说:

  1. 起草阶段:用一个轻量级的草稿模型(Draft Model)快速生成一串候选 token
  2. 验证阶段:用完整的大模型(Target Model)一次性验证整个候选块

由于验证是并行的——一次前向传播验证多个 token——而且拒绝采样规则保证输出分布与目标模型完全一致,投机解码可以在不损失任何质量的前提下加速生成。

听起来完美,对吧?但实际落地有两个大坑。

三、dSpark 要解决的两个核心问题

问题一:草稿质量——“后缀衰减”

早期的草稿模型是自回归的,逐 token 生成,速度随块大小线性增长,所以只能用很短的块。后来出现了并行草稿模型——所有候选 token 一次生成,起草延迟几乎与块大小无关。

但并行模型有个致命缺陷:每个位置独立预测,无法建模 token 之间的依赖关系。这就导致越靠后的 token,被接受的概率急剧下降——这就是所谓的**“后缀衰减”(Suffix Decay)**。

想象一下:草稿模型写了一个句子,前三个词都很合理,但第四个词开始胡言乱语。大模型验证时,前三词通过,后面的全部被拒——白费功夫。

问题二:系统效率——“验证浪费”

即使草稿质量不错,还有一个工程问题:在高并发场景下,对所有请求都用固定的验证长度。

有些请求的草稿质量高,可以验证很长的块;有些质量低,验证长块就是浪费计算资源。在服务器负载高的时候,这种浪费会直接导致吞吐量崩溃——用户越多,每个用户反而越慢。

四、dSpark 的两大创新

创新一:半自回归架构(Semi-Autoregressive Architecture)

dSpark 的解决方案是"既要又要":既要并行生成的低延迟,又要自回归的序列连贯性。

它的草稿模型分为两个阶段:

  1. 并行骨干网络:基于 DFlash 架构,一次前向传播生成所有候选位置的深度隐藏状态和基础 logits
  2. 轻量级顺序头:在并行输出之上,加一个极轻量的顺序修正模块

这个顺序头使用低秩分解(Low-Rank Factorization)——一个 256 维的嵌入矩阵乘一个 logit 投影矩阵——来建模 token 间的局部依赖关系。参数极少,延迟开销几乎为零。

更高级的版本还支持 RNN 头,通过一个门控线性投影维护隐藏状态,在整个块上累积序列历史。

效果:在保持并行生成 O(1) 延迟的同时,有效缓解了后缀衰减,大幅提升了草稿块的接受长度。

创新二:置信度调度验证(Confidence-Scheduled Verification)

dSpark 的第二个创新在于系统层面:根据实时服务器负载和请求难度,动态调整验证长度。

核心思路:

  • 每个请求的草稿块都有一个"前缀存活概率"——越靠前的 token 越可能被接受
  • 服务器负载低时,验证长块,追求单个请求的低延迟
  • 服务器负载高时,验证短块,把 GPU 批次容量留给更多请求

这个调度策略考虑了引擎特定的吞吐量配置文件,在用户感知延迟和硬件效率之间找到了最优平衡点。

五、实际效果:60%–85% 的速度提升

自回归 vs 半自回归对比图:左侧逐 token 生成 vs 右侧块生成,底部显示 60-85% 速度提升

dSpark 在 DeepSeek-V4 的生产系统中进行了部署测试,结果令人震惊:

  • 用户生成速度提升 60%–85%(在相同吞吐量水平下)
  • 在严格的延迟 SLA 下,防止了服务容量崩溃
  • 实现了此前无法达到的性能层级——将服务系统的帕累托前沿向前推进了一大步

更关键的是,dSpark 在多个领域的离线基准测试中,接受长度显著优于现有的自回归和并行草稿模型。

六、完全开源:DeepSpec 仓库

DeepSeek 不仅发布了论文,还做了三件令人敬佩的事:

  1. 论文公开:在 GitHub 上发布了完整的 DSpark 论文
  2. 代码开源:开源了 DeepSpec——一个算法驱动的投机解码训练仓库
  3. 模型权重发布:在 Hugging Face 上发布了 DeepSeek-V4-Pro-DSpark 的 checkpoint

这意味着任何团队都可以在自己的模型上复现 dSpark 的效果。目前 dSpark 已经支持 DeepSeek V4 Flash、V4 Pro,以及 Qwen 和 Gemma 系列模型。

七、为什么这比新模型更重要?

AI 竞赛正在从"造更聪明的模型"转向"让强大的模型跑得更快、更便宜、更稳定"。

dSpark 的意义在于:它不是一个需要你重新训练的模型,而是一个即插即用的推理加速模块。 你现有的模型、现有的硬件、现有的基础设施——什么都不用换,就能获得 60%–85% 的速度提升。

对于实时语音助手、多步推理 Agent、大规模 API 服务这些场景来说,dSpark 提供了一个清晰的蓝图:如何根据实时服务器需求和请求难度,动态分配计算资源。

结语

DeepSeek 的 dSpark 证明了:通往真正世界级推理效率的道路,不在于孤立的算法或架构优化,而在于完整的系统协同设计。

当大多数人的目光还停留在"下一个模型有多大"时,DeepSeek 已经在思考"如何让已有的模型跑得更快"。这种务实而深刻的技术哲学,或许才是 DeepSeek 最可怕的地方。

视频来源:AI Search — “Deepseek drops another HUGE breakthrough” 论文:github.com/deepseek-ai/DeepSpec 模型:huggingface.co/deepseek-ai/DeepSeek-V4-Pro-DSpark

← 返回文章列表