缺陷修复
重要性 6.12
洞察度 4.00
修复 DSV4/3.2 词表重复计数引发的引导解码崩溃
值得精读。这是“小改动、深根因”的典型 bugfix:tokenizer 包装类覆写 `__len__` 会静默破坏结构化输出的 grammar bitmask 宽度,而上游库语义变化(transformers 5.x)让曾经的 workaround 从必要变为有害。建议关注两点:一是作者选择整体删除而非修正公式,避免后续再次失配;二是测试被回退的取舍——若能保留一个极简回归测试(构造 id 落在基础词表内的 added token)会更有长期保障。对结构化输出或 DeepSeek 模型维护者,本 PR 是必读的参考案例。