Claude Opus 4.7以95.08分居首:2026-08-21 Smoke快测数据简报

2026-08-21 赢政指数 Smoke 快测覆盖 10 个模型,Claude Opus 4.7 以 95.08 分位居当日首位。Smoke 为每日 10 题快测,适合观察短期信号,不等同 Full 周榜结论。

本次 Smoke 评测只覆盖代码执行和材料约束两个主榜维度,主榜公式为 0.55 × 代码执行 + 0.45 × 材料约束。由于每日样本量较小,单日分数更适合作为监控信号,而不是对模型能力做长期定论。

当日排名

排名模型主榜代码执行材料约束诚信
#1Claude Opus 4.795.0898.590.9pass
#2Qwen3 Max79.647585.3warn
#3豆包 Pro78.67583pass
#4Grok 476.3671.981.8pass
#5Claude Sonnet 4.672.1576.666.7pass
#6GPT-5.570.0958.384.5pass
#7DeepSeek V4 Pro68.8858.381.8pass
#8GPT-o362.4756.869.4warn
#9Gemini 3.1 Pro505050warn
#10Gemini 2.5 Pro18.3723.512.1fail

数据解读

从分数结构观察,Claude Opus 4.7主榜95.08,代码执行98.5与材料约束90.9形成较均衡搭配,位列首位。Qwen3 Max主榜79.64,代码执行75而材料约束85.3,显示材料约束相对更强的特点。豆包Pro主榜78.6,代码执行75材料约束83,结构类似。Grok 4主榜76.36,代码执行71.9材料约束81.8,同样呈现材料约束侧重的搭配。

异动模型中,Gemini 2.5 Pro主榜下降44.1分,代码执行下降21.5分,材料约束下降71.6分,诚信从pass转为fail。Gemini 3.1 Pro主榜下降29.5分,代码执行下降17分,材料约束下降44.8分,诚信转为warn。Claude Sonnet 4.6主榜下降22.5分,代码执行下降15.4分,材料约束下降31.1分。GPT-o3主榜下降22.2分,代码执行下降19.5分,材料约束下降25.4分,诚信转为warn。GPT-5.5主榜下降18.2分,代码执行下降33.7分。这些变化可能源于题目抽样波动,也可能是真实退化,需后续run复核。

Smoke测试为小样本单日信号,以上解读保持克制,不做长期结论。

主要变化

  • Gemini 2.5 Pro:主榜下降44.1分,代码执行-21.5分,材料约束-71.6分,诚信pass→fail
  • Gemini 3.1 Pro:主榜下降29.5分,代码执行-17分,材料约束-44.8分,诚信pass→warn
  • Claude Sonnet 4.6:主榜下降22.5分,代码执行-15.4分,材料约束-31.1分
  • GPT-o3:主榜下降22.2分,代码执行-19.5分,材料约束-25.4分,诚信pass→warn
  • GPT-5.5:主榜下降18.2分,代码执行-33.7分

需要关注的信号

  • Gemini 2.5 Pro:今日诚信评级为 fail(基于当日 Smoke 数据)。

读这类 Smoke 简报时,重点应放在两个问题上:第一,某个模型是否连续多日暴露同一类弱点;第二,诚信评级是否从 pass 进入 warn 或 fail。单日执行或约束分数的大幅变化,可能来自题目抽样,也可能是真实退化的早期信号,需要后续 run 复核。


数据来源:赢政指数 (YZ Index) | Run #288 | 查看原始数据

本文来自 Winzheng Index 博客,赢政天下(winzheng.com)进行了全文翻译。 点击这里查看原文 如果转载中文,请注明出处,谢谢支持!