#31757 [AMD] Build Miles nightly ROCm images with docker/build.py and test ROCm 7.2
原始 PR · 作者 XinyuJiangCMU · 合并时间 2026-07-23 08:30
Miles ROCm 构建迁移至 docker/build.py,测试切换至 7.2
值得精读,尤其是关注 CI 安全实践(最小权限原则)和外部脚本集成的团队。设计权衡如测试覆盖与维护成本的取舍也值得参考。
SGLang is a high-performance serving framework for large language models and multimodal models.
原始 PR · 作者 XinyuJiangCMU · 合并时间 2026-07-23 08:30
Miles ROCm 构建迁移至 docker/build.py,测试切换至 7.2
值得精读,尤其是关注 CI 安全实践(最小权限原则)和外部脚本集成的团队。设计权衡如测试覆盖与维护成本的取舍也值得参考。
原始 PR · 作者 danielafrimi · 合并时间 2026-07-23 06:09
Mamba chunked prefill 配置警告
值得快速合并。代码简洁清晰,定位准确,不引入运行时风险。可作为调试辅助工具帮助用户识别不合理的分块配置。
升级 FlashInfer 至 0.6.15.post1,修复 MLA 和 MoE 性能回归
该 PR 值得精读,尤其是 MLA decode host overhead 的优化思路(持久化 buffer 避免重复分配)以及 MoE dispatch 缓存的设计。对于考虑升级 FlashInfer 的团队具有参考价值。
原始 PR · 作者 ilyasher-harmonic · 合并时间 2026-07-23 05:14
支持 anyOf schema 解析 qwen3_coder 工具调用参数
值得精读。展示了如何通过复用通用 schema 推断函数扩展专用解析器的类型支持,代码改动简洁、测试充分,是低风险修复的范例。
SM100 上默认开启 CuteDSL BF16 GEMM
值得精读,尤其是关注内核自动选择策略的设计和梯度检查的添加。可作为后续其他后端默认启用的参考模式。
修复 Standard allocator 过度驱逐问题
值得快速合并。建议后续补充针对 `evict_from_tree_cache` Standard allocator 分支的单元测试,验证驱逐量正确性。
统一优雅关闭时的 pinned host 内存释放路径
值得精读,因为展示了如何通过抽象基类统一资源释放路径,是良好的代码重构范例。关注点在于是否所有涉及 host pool 的缓存都已覆盖。
回滚 RuntimeContext 配置命名空间迁移上半部分修复正确性缺陷
强烈建议阅读 PR body 中列出的三项缺陷及回滚范围,理解配置系统设计中的加载时覆盖与多实例隔离难题。本 PR 是架构决策的宝贵反面案例,值得团队深入讨论。
参与讨论