#23890 [spec decoding] add extra attribute 'spec_hidden_size'
原始 PR · 作者 Qiaolin-Yu · 合并时间 2026-04-29 10:54
为 Eagle 推测解码引入 spec_hidden_size,修复 hidden size 不匹配
推荐合并并部署。该 PR 改动量小但影响面广,修复了关键的维度不匹配问题,且经过多场景 CI 验证。值得关注的设计决策是将 `hc_mult` 从模型配置中显式读取,而不是硬编码扩展系数,保持了灵活性和可扩展性。
参与讨论