Prhub

#36950 [Docs] Restore the AIME25 label so GLM-5.3 FP8 and BF16 scores render again

原始 PR 作者 mmangkad 合并时间 2026-08-29 11:38 文件变更 1 提交数 1 评论 1 代码增减 +9 / -0

执行摘要

恢复 GLM-5.3 文档中 AIME25 标签及相关评分渲染。

PR 标题及提交信息明确指出,需要恢复 AIME25 标签以让 GLM-5.3 FP8 和 BF16 得分在文档中重新渲染。此前该标签被移除或遗漏,导致文档中对应的基准分数无法展示。

此 PR 为简单的文档修复,价值不高,但可快速合并。无需精读,但可关注类似文档配置的维护方式。

讨论亮点

无显著讨论,仅有 Mintlify 自动预览评论和一次审核通过。

实现拆解

  1. docs/src/snippets/configs/zai-org/glm-5.3.jsx 文件的 benchmarkCommands.accuracy 对象中新增 aime25_pct 命令块,内容与 aime26_pct 类似,但运行 sgl-eval run aime25
  2. 在文件底部的 accuracyLabels 数组中插入 ["aime25_pct", "AIME25", "%"] 条目,并调整原有 AIME26 与 GSM8K 条目的顺序以保持一致性。
  3. 无测试或配置改动,因为这是纯文档展示配置修复。
文件 模块 状态 重要度
docs/src/snippets/configs/zai-org/glm-5.3.jsx 文档配置 modified 5.31

关键源码片段

docs/src/snippets/configs/zai-org/glm-5.3.jsx core-logic

该文件是文档展示的配置来源,本次修复的核心改动位于此,新增 AIME25 命令块和标签。

// 在 benchmarkCommands.accuracy 对象中新增 AIME25 命令块
// 该命令用于运行 AIME25 评估,并输出到指定目录
aime25_pct:
`# To install sgl-eval: pip install git+https://github.com/sgl-project/sgl-eval
sgl-eval run aime25 \
  --model {{MODEL_NAME}} --api-key <api-key> \
  --n-repeats 16 --max-tokens 64000 \
  --temperature 1.0 --top-p 0.95 --thinking \
  --out-dir /sgl-workspace/logs \
  --base-url http://{{CURL_HOST}}:{{CURL_PORT}}/v1`,// 在 accuracyLabels 数组中注册 AIME25 标签,使文档正确渲染对应分数
accuracyLabels: [
  ["aime26_pct", "AIME26", "%"],
  ["aime25_pct", "AIME25", "%"],
  ["gsm8k_pct", "GSM8K (1-shot)", "%"],
],

评论区精华

没有提炼出高价值讨论线程

当前评论区没有形成足够清晰的争议点或结论,后续有更多讨论时会体现在这里。

风险与影响

仅修改文档配置文件,不影响任何运行时逻辑。风险极低,唯一潜在问题是命令块中的参数(如 --n-repeats)是否与 AIME25 评估需求匹配,但未见问题。

影响范围限于 GLM-5.3 文档页面,修复了 AIME25 分数不显示的问题,提升文档可用性。对用户和系统无其他影响。

文档配置变更

关联 Issue

未识别关联 Issue

当前没有检测到明确关联的 Issue 链接,后续同步到相关引用后会出现在这里。

完整报告

参与讨论