执行摘要

• 一句话：多模态扩展生成测试拆 4 并行分片，关键路径提速 3.4 倍
• 推荐动作：值得快速浏览，作为 CI 分片模式的参考：label 中 %N、parallelism 字段与 pytest --num-shards/--shard-id 的组合方式，以及在 PR body 中展示的 node id 集合覆盖验证方法，都是可复用的良好实践。不涉及产品代码，无需深入阅读源码逻辑。

功能与动机

开发者 khluu 在 PR body 中给出明确数据：Buildkite build #83851 中该 job 耗时 71 分钟，近期通过耗时分布为中位数 68 分钟、p90 75 分钟、最长 131 分钟。4 个分片可以提供 p90 余量，降低对不均衡模型用例的敏感度，目标是把最慢分片控制在 30 分钟以内。

实现拆解

实现过程分 4 步：

1. 定位入口：唯一修改文件 .buildkite/test_areas/models_multimodal.yaml，目标任务是 key 为 multi-modal-models-extended-generation-2 的 step。
2. 启用并行：label 追加 %N 以便 Buildkite UI 区分 4 个并行 job，并在 step 上新增 parallelism: 4。
3. 传递分片参数：pytest 命令追加 --num-shards=$$BUILDKITE_PARALLEL_JOB_COUNT 和 --shard-id=$$BUILDKITE_PARALLEL_JOB，由 Buildkite 注入的环境变量决定当前 job 执行哪一份用例；同时保留原 marker 过滤 'split(group=0) and not core_model'，确保只拆分 group=0 部分，Extended Generation 3 的 group=1 逻辑不受影响。
4. 验证配套：运行 pre-commit 和 PyYAML 解析校验，并做一次 targeted Buildkite run #83888；四个分片的 node id 集合分别为 29/33/21/33，两两不相交且并集等于基线 116/116，无缺失、多余或重复。无源码、测试或部署配套改动。

关键文件：

• .buildkite/test_areas/models_multimodal.yaml（模块 流水线；类别 config；类型 configuration）: 唯一变更文件，定义了 multi-modal-models-extended-generation-2 任务的并行分片方式与 pytest 命令，是本次 CI 提速的全部内容。

关键符号：未识别

评论区精华

该 PR 没有任何实质性 review 讨论，review_comments_count 为 0。唯一审核是 claude[bot] 的自动评论，提示本仓库配置为手动 code review，可通过 @claude review 触发一次性或持续审核；最终由 vllm-bot 直接合并。这说明该变更属于低争议的 CI 配置调整，无需人工评审介入。

• 仓库为手动审核模式，未产生实质讨论 (other): 未触发额外审核，PR 由 vllm-bot 直接合并；变更本身是纯 CI 配置，无代码审查负担。

风险与影响

• 风险：风险点集中在 CI 资源与分片行为上：
  1. 并行资源占用：4 个分片同时各占 1 台 h200_35gb，若 agent 池在高峰期容量不足，实际墙钟收益可能打折；不过整体 GPU 时间为 63.885 GPU-min 分钟，低于未分片基线的 71.304 分钟。
  2. 分片均衡依赖 pytest 分片实现：当前验证了 116 个用例覆盖完整，但未来新增测试用例可能改变各分片负载，需要重新评估分片数；当前最慢分片 20.678 分钟距 30 分钟目标仍有 p90 余量。
  3. 覆盖完整性依赖分片插件稳定性：该 PR 已在当前集合上验证无遗漏，但该证明在新测试加入后需重新执行。
  4. 产品代码零改动，集成风险低。
     - 影响：对团队最直接的影响：触发该 CI key 的 PR 关键路径从约 1 小时（median 68 分钟）降到约 20 分钟，显著缩短多模态模型相关变更的验证等待时间。对并行基础设施的占用从 1 台变为 4 台 h200_35gb 同时短时运行，总 GPU 时间反而略降。对最终用户无影响。由于是纯 YAML 配置变更，改动面很小，回归风险集中在 CI 行为而非产品功能。
     - 风险标记：并发占用 4 台 h200_35gb, pytest 分片均衡与覆盖依赖测试集合规模, 纯配置变更，无代码回归面

关联脉络

• PR #52326 [CI] Shard Humming H100 eval: 同系列 CI 分片优化：将 Humming H100 eval 拆为 3 个并行 Shard，与本 PR 同属缩短 CI 关键路径的工作。
• PR #52327 [CI] Shard MoE refactor B200 eval: 同为 CI 分片优化，将 MoE B200 eval 拆为 4 个 Shard，与本 PR 采用相同的 parallelism + pytest shard 模式。
• PR #52331 [Test][LoRA] Speed up the LoRA test job: LoRA 测试提速 3.7x，与本 PR 同属 CI 测试加速主题，反映团队在系统优化 CI 关键路径。