Prhub

sgl-project/sglang

SGLang is a high-performance serving framework for large language models and multimodal models.

监控状态:已开启 最近同步:2026-09-02 20:51 同步状态:空闲 下次计划:2026-09-02 21:51

PR 列表

更多筛选
2026-07-23

#30938 Warn on small Mamba chunked prefill size

原始 PR · 作者 danielafrimi · 合并时间 2026-07-23 06:09

其他 重要性 4.78 洞察度 3.00

Mamba chunked prefill 配置警告

值得快速合并。代码简洁清晰,定位准确,不引入运行时风险。可作为调试辅助工具帮助用户识别不合理的分块配置。

#31927 Bump FlashInfer to 0.6.15.post1

原始 PR · 作者 mmangkad · 合并时间 2026-07-23 05:22

性能优化 重要性 8.30 洞察度 6.00

升级 FlashInfer 至 0.6.15.post1,修复 MLA 和 MoE 性能回归

该 PR 值得精读,尤其是 MLA decode host overhead 的优化思路(持久化 buffer 避免重复分配)以及 MoE dispatch 缓存的设计。对于考虑升级 FlashInfer 的团队具有参考价值。

重构 重要性 6.45 洞察度 6.00

统一优雅关闭时的 pinned host 内存释放路径

值得精读,因为展示了如何通过抽象基类统一资源释放路径,是良好的代码重构范例。关注点在于是否所有涉及 host pool 的缓存都已覆盖。

缺陷修复 重要性 8.79 洞察度 6.00

回滚 RuntimeContext 配置命名空间迁移上半部分修复正确性缺陷

强烈建议阅读 PR body 中列出的三项缺陷及回滚范围,理解配置系统设计中的加载时覆盖与多实例隔离难题。本 PR 是架构决策的宝贵反面案例,值得团队深入讨论。

参与讨论