GPT-o3以97.83分居首:2026-10-20 Smoke快测数据简报

2026-10-20 赢政指数 Smoke 快测覆盖 14 个模型,GPT-o3 以 97.83 分位居当日首位。Smoke 为每日 10 题快测,适合观察短期信号,不等同 Full 周榜结论。

本次 Smoke 评测只覆盖代码执行和材料约束两个主榜维度,主榜公式为 0.55 × 代码执行 + 0.45 × 材料约束。由于每日样本量较小,单日分数更适合作为监控信号,而不是对模型能力做长期定论。

当日排名

排名模型主榜代码执行材料约束诚信
#1GPT-o397.8398.597pass
#2Claude Opus 4.791.29784.1pass
#3GPT-5.591.29784.1pass
#4豆包 Pro90.4895.784.1pass
#5GPT-6 Luna89.049779.3pass
#6Grok 488.8992.884.1warn
#7Claude Sonnet 4.685.719771.9pass
#8GPT-6.1 Sol84.769769.8pass
#9GPT-6 Sol82.69765pass
#10Gemini 2.5 Pro72.757570pass
#11GPT-6 Astra71.017269.8pass
#12Gemini 3.1 Pro63.74784.1pass
#13GLM-4.663.74784.1pass
#14DeepSeek V4 Pro59.64775pass

主要变化

  • GPT-o3:主榜上升42.7分,代码执行+51.5分,材料约束+31.9分
  • 豆包 Pro:主榜上升16分,代码执行+23.7分,材料约束+6.5分
  • GLM-4.6:主榜上升15.4分,材料约束+34.1分
  • Claude Opus 4.7:主榜上升11.4分,代码执行+25分,材料约束-5.2分
  • Claude Sonnet 4.6:主榜上升11.4分,代码执行+25.4分,材料约束-5.7分

需要关注的信号

  • GPT-6 Astra:主榜暴跌 -11.3 分
  • Qwen3 Max:数据不完整(缺 execution,grounding,judgment,integrity,communication 维度,API 故障/超时),已进入自动补跑,本期不参与排名

读这类 Smoke 简报时,重点应放在两个问题上:第一,某个模型是否连续多日暴露同一类弱点;第二,诚信评级是否从 pass 进入 warn 或 fail。单日执行或约束分数的大幅变化,可能来自题目抽样,也可能是真实退化的早期信号,需要后续 run 复核。


数据来源:赢政指数 (YZ Index) | Run #387 | 查看原始数据

本文来自 Winzheng Index 博客,赢政天下(winzheng.com)进行了全文翻译。 点击这里查看原文 如果转载中文,请注明出处,谢谢支持!