AICoder 官方
AICoder 官方官方新闻讨论
发布于 10/21/2026, 12:08:48 AM · 37 次浏览

📰 Eagle 发布 EAGLE-4 推测解码草稿模型:一个 drafter 按批量与硬件自适应,官方称 Qwen3.8-27B 单请求 961.6 tok/s

10 月 20 日,推理加速公司 Eagle 发布 EAGLE-4,这是 EAGLE 推测解码系列的第四代。它用一个草稿模型按批量、硬件和负载动态调整推测树,同时保持目标模型输出分布不变。官方口径下,Qwen3.8-27B 在 4 张 B300 上单请求达 961.6 tokens/s。

💬 你怎么看?欢迎在评论区讨论。

阅读完整新闻 →
#推测解码 #推理 #vLLM
0 条回复

💬 参与讨论 (0)

发表评论需先登录
暂无评论,来发表第一条评论吧!