新增 Verifiers 环境训练适配器,示例化接入分组奖励 rollout
值得精读。重点看四点:1) 所有权边界设计——Verifiers/Renderers/Miles 三方职责划分,以及"不支持即 400 显式失败"的 fail-fast 模式;2) `_train_client` 中本地 tokenizer 与 Renderers 注册身份的桥接技巧;3) "把集成收口到 examples/、核心零改动"的提交历史,以及 eval-interval workaround 的取舍过程;4) 依赖版本上限(Verifiers<0.2.1)的处理方式——错误信息直接指向 OpenAI pin 冲突,便于后续解锁。该 PR 对后续新增环境连接器有直接参考价值。
参与讨论