#27201 [AMD][WA] force to use gate_mode interleaved to fix tp2/tp4/tp8 acc issue
原始 PR · 作者 kkHuang-amd · 合并时间 2026-06-06 11:18
强制 interleave MoE 布局修复 AMD TP>1 精度崩溃
建议精读。该 PR 展示了如何快速定位硬件后端内核 bug、设计 workaround 并验证精度恢复的完整流程,对于处理类似跨平台兼容性问题有参考价值。同时注意 `.to(torch.int32)` 类的问题在类型敏感性高的系统中很典型。