腾讯于 2026-11-07 14:20 UTC 在 Hugging Face 发布 tencent/Qwen3.8-27B-DSpine-b16:一个约 2B 参数、5 层的投机解码草稿模型,块大小 16、8,192 Token 滑动窗口,Apache 2.0 许可,配套代码在 GitHub Tencent/DSpine,论文为 arXiv 2609.36173。模型卡(厂商口径)显示,在 SGLang 0.5.22、BF16、并发 8 的条件下,SWE-bench Pro 回放在 xhigh 推理下输出吞吐从约 248 提升到约 791 tokens/s(约 3.19 倍),官方 DFlash2 为 2.87 倍;10 组 Agent 场景接受长度全部高于 DFlash2。注意 DSpine 每块草拟 16 个 Token,DFlash2 为 8 个,配置并不完全相同,结果尚无第三方复现。

核心要点速览

  • ✓发布:腾讯 2026-11-07 14:20 UTC 上传 tencent/Qwen3.8-27B-DSpine-b16,约 20.3 亿参数(BF16 约 4GB),5 层、块大小 16、8,192 Token 滑动窗口,Apache 2.0
  • ✓吞吐(厂商口径):SWE-bench Pro 回放 xhigh 推理从约 248 到约 791 tokens/s,约 3.19 倍;DFlash2 为 2.87 倍
  • ✓最高加速(厂商口径):WorkBuddy Office 在 low 推理下约 3.84 倍(DFlash2 为 3.17 倍)
  • ✓接受长度(厂商口径):SWE-bench Pro xhigh 为 4.77 对 DFlash2 的 4.00;GSM8K 贪心解码 7.20 对 5.69
  • ✓注意:DSpine 草拟块 16、DFlash2 为 8,测试条件不完全对等;目前只有模型卡数据,尚无第三方复现
腾讯开源 DSpine:Qwen3.8-27B 专用并行草稿模型,厂商口径 SWE-bench Pro 回放吞吐约 3.19 倍、全面高于 DFlash2
🖼️要闻配图
点击全屏高清查看
🧭

把技术选型换算成你的开发预算

40 款主流编程套餐横向比价,支持输入/输出 Token 真实账单模拟

🔬

深度技术解析与实战评估

核心背景与行业痛点

大模型逐个 Token 解码,每生成一个 Token 都要把整张网络跑一遍。在编码 Agent 这类长输出、多轮工具调用的场景里,这直接决定了等待时间和每张 GPU 能服务多少请求。投机解码的思路是:先由小草稿模型一次猜出多个 Token,再让大模型一次性验证、保留猜对的部分,输出分布不变。腾讯 11 月 7 日 14:20 UTC 在 Hugging Face 发布了 tencent/Qwen3.8-27B-DSpine-b16,专门给阿里开源的 Qwen3.8-27B 做草稿模型。X 上本地推理玩家 Lasse(@lasse_ai)转发时称其「全面胜过 DFlash2」,该帖抓取时约 148 赞、120 收藏。

架构亮点与底层机制

据模型卡,DSpine 并行生成草稿 Token,每一层把预测出的前序特征传给相邻位置,让因果依赖沿网络深度传递,而不是像自回归草稿那样一个个往后推。这个检查点是 5 层草稿模型,约 20.3 亿参数,块大小 16,滑动窗口 8,192 Token。推理时采用参考 DSpark 的动态验证,并开启 ReplaySSM。代码在 GitHub Tencent/DSpine,论文《Draft in Parallel, Condition Through Depth》为 arXiv 2609.36173。腾讯 10 月已先放出 Qwen3-8B 版本。

权威 Benchmark 与实测跑分对比

以下均为厂商口径,测试环境为 SGLang 0.5.22、BF16、FlashAttention 3、并发 8。SWE-bench Pro 回放在 xhigh 推理下,自回归约 248 tokens/s,DFlash2 约 712(2.87 倍),DSpine 约 791(3.19 倍);WorkBuddy Office 在 low 推理下 DSpine 达 3.84 倍。接受长度方面,SWE-bench Pro xhigh 为 4.77 对 4.00,GSM8K 贪心解码为 7.20 对 5.69。需要注意,DSpine 每块草拟 16 个 Token,官方 DFlash2 为 8 个,两者配置并不对等;Agent 测试每个子集只回放 20 段对话,样本不大,目前没有第三方复现。

开发者实战落地与开箱指南

已在本地或自有集群跑 Qwen3.8-27B 编码 Agent 的团队可以直接试:克隆 Tencent/DSpine 并 pip install -e .,再用 sglang serve 加上 --speculative-algorithm DSPINE、--speculative-num-draft-tokens 16 并指向草稿模型路径,模型卡给出了完整参数(含 ReplaySSM 和 Mamba 缓存相关选项)。草稿模型额外占用约 4GB 显存。投机解码不改变输出分布,但实际加速取决于你的提示词分布和并发数,建议用自己的 Agent 日志回放对比,再决定是否替换 DFlash2 或 EAGLE 类方案。

实战指南准备好将技术转化为生产力?

即刻查看该技术对应模型与主流工具的实测差异,或一键测算团队 API 调用与 $20/月套餐盈亏平衡点。

接着读Memdoor 复现 GVS5H:5 个 Qwen3.8-27B 组队在 LiveCodeBench Hard 前 10 题均分 9.8/10,高于 Fable 5 单次调用的 8.0
立即阅读→