#47070 [Feature] Support sequence parallel without the need for DP, 1.9%~5.0% E2E Throughput Improvement
原始 PR · 作者 yewentao256 · 合并时间 2026-07-05 20:41
移除 SP 必须依赖 DP 的限制,提升 MoE 吞吐 1.9%-5%
建议关注并行配置的相关变更,特别是 DP=1 时启用 SP 的新能力。对于使用 MoE 且未开启 DP 的用户,推荐尝试本 PR 以获取性能提升。同时注意 LoRA 与 SP 的互斥约束。
参与讨论