推测解码
2 published articles
大语言模型与模型3 min read
系统优化
DSpark 揭示：快速 AI 推理是调度问题，而非模型技巧
DeepSeek 的 DSpark 论文揭示，简单的推测解码在高并发下会降低吞吐量。其解决方案, , 置信度调度的验证, , 根据每个请求调整块长度，并改变了服务性能的帕累托前沿。
2026-07-12
DeepSeek-V3Featured4 min read
半自回归推测性解码投入生产
DeepSeek的DSpark修复了制约快速AI推理的两大问题
DeepSeek的新推测性解码框架解决了限制并行草案器的两大瓶颈：后缀衰减和浪费性验证。通过将半自回归架构与置信度调度器相结合，在目标模型验证之前修剪低价值令牌，DSpark在生产环境中实现了60%-85%的生成速度提升。
2026-07-08