Claude Opus 4.7以100分居首:2026-08-22 Smoke快测数据简报

2026-08-22 赢政指数 Smoke 快测覆盖 11 个模型,Claude Opus 4.7 以 100 分位居当日首位。Smoke 为每日 10 题快测,适合观察短期信号,不等同 Full 周榜结论。

本次 Smoke 评测只覆盖代码执行和材料约束两个主榜维度,主榜公式为 0.55 × 代码执行 + 0.45 × 材料约束。由于每日样本量较小,单日分数更适合作为监控信号,而不是对模型能力做长期定论。

当日排名

排名模型主榜代码执行材料约束诚信
#1Claude Opus 4.7100100100pass
#2豆包 Pro99.0110097.8pass
#3Qwen3 Max98.6510097pass
#4Grok 490.0191.488.3pass
#5GPT-5.586.2575100pass
#6Claude Sonnet 4.684.97597pass
#7Gemini 2.5 Pro83.3969.8100pass
#8GPT-o379.347288.3pass
#9Gemini 3.1 Pro72.550100pass
#10GLM-4.671.515097.8pass
#11DeepSeek V4 Pro67.245088.3pass

数据解读

今日赢政指数Smoke快测中,Claude Opus 4.7以代码执行100、材料约束100的均衡结构位居主榜100首位,豆包Pro代码执行100、材料约束97.8形成高代码执行搭配中等材料约束的组合,主榜99.01紧随其后。Qwen3 Max同样代码执行100、材料约束97,主榜98.65,显示头部模型多呈现代码执行满分或接近满分、材料约束略低的搭配特征。Grok 4代码执行91.4、材料约束88.3,主榜90.01,GPT-5.5则以代码执行75、材料约束100的材料约束强于代码执行的结构,主榜86.25,体现不同模型在两项指标上的强弱互补。

Gemini 2.5 Pro主榜较前次同口径run上升65分,代码执行上升46.3分,材料约束上升87.9分,诚信由fail转为pass;GLM-4.6主榜上升38.8分,代码执行上升50分,材料约束上升25分,诚信由warn转为pass;豆包Pro主榜上升20.4分,代码执行上升25分,材料约束上升14.8分。这些升幅集中在材料约束或代码执行单项的明显提升,需后续run复核以确认是否为单日抽样波动。

Gemini 2.5 Pro诚信评级出现fail→pass的异常信号,可能源于题目抽样波动或单次测试中的临时表现变化,也可能反映真实退化迹象,Smoke小样本单日数据不足以区分两者,建议进行多轮复核后再做判断。

主要变化

  • Gemini 2.5 Pro:主榜上升65分,代码执行+46.3分,材料约束+87.9分,诚信fail→pass
  • GLM-4.6:主榜上升38.8分,代码执行+50分,材料约束+25分,诚信warn→pass
  • Gemini 3.1 Pro:主榜上升22.5分,材料约束+50分,诚信warn→pass
  • 豆包 Pro:主榜上升20.4分,代码执行+25分,材料约束+14.8分
  • Qwen3 Max:主榜上升19分,代码执行+25分,材料约束+11.7分,诚信warn→pass

需要关注的信号

  • Gemini 2.5 Pro:诚信评级降为 Fail (fail→pass)

读这类 Smoke 简报时,重点应放在两个问题上:第一,某个模型是否连续多日暴露同一类弱点;第二,诚信评级是否从 pass 进入 warn 或 fail。单日执行或约束分数的大幅变化,可能来自题目抽样,也可能是真实退化的早期信号,需要后续 run 复核。


数据来源:赢政指数 (YZ Index) | Run #289 | 查看原始数据

本文来自 Winzheng Index 博客,赢政天下(winzheng.com)进行了全文翻译。 点击这里查看原文 如果转载中文,请注明出处,谢谢支持!