Prhub

verl-project/verl

verl: Volcano Engine Reinforcement Learning for LLMs

监控状态:已开启 最近同步:2026-09-16 22:52 同步状态:空闲 下次计划:2026-09-16 23:52

PR 列表

更多筛选
2026-05-22
2026-05-21
缺陷修复 重要性 2.69 洞察度 3.00

修复 GRPO shell 脚本中 DEVICE 变量未初始化

此 PR 为小范围 bug 修复,简单直接,值得快速合并。代码审查中提出的风险(stdout 污染、硬件可用性检测)在实际使用中可能性较低(`torch_npu` 在标准安装下不输出 stdout 信息),且社区已有类似用法,可接受。建议未来对类似自动检测逻辑进行统一抽象。

缺陷修复 重要性 2.53 洞察度 1.00

修复 NPU 脚本中 use_mbridge 参数为 True

该 PR 本质上是跟随上游校验的合规性修复,无技术深度,但值得注意:新增的 flash attention 和重计算配置可能对性能有积极影响,可作为 NPU 脚本的默认优化模板。

重构 重要性 9.18 洞察度 6.00

重构 Megatron 后端以采用上游 Megatron-Bridge 新 API

建议在合并前或合并后立即验证 reviewer 指出的默认配置问题,特别是 MoE 设置和 adapter_path 访问。这些值得精读的地方在于如何平衡减少重复代码和保持行为兼容。整体设计方向正确,但需关注回归。

缺陷修复 重要性 5.86 洞察度 6.00

修复 FSDP2 异构缓冲区 NCCL 死锁

值得精读:该 PR 揭示了 FSDP2 包装后 `named_buffers()` 顺序不确定这一容易被忽视的坑,并提供了一种简单有效的修复模式。对于计划支持更多异构模型架构的团队尤其有参考价值。

功能 重要性 7.73 洞察度 6.00

为 Gemma4 添加专用工具解析器,支持多轮 agent 循环中的工具调用

该 PR 设计清晰,遵循了现有扩展模式,适合精读以了解工具解析器的抽象方式和不同模型的适配策略。建议关注 stop token 注入机制和响应格式化逻辑,这两个机制未来可能扩展至更多模型。另外,考虑为 tool parser 添加单元测试,减少对端到端测试的依赖。

参与讨论