Benchmark Atlas

亚洲模型实验室 · arXiv 论文

Training–Decoding Objective Reversal

复现 Step-3 Figure 4:同一对模型在 8K/32K decoding 与 training 成本上的赢家发生反转。

stepfuncosttrainingdecoding
The cheapest model changes with the objective复现 Step-3 Figure 4:同一对模型在 8K/32K decoding 与 training 成本上的赢家发生反转。 示意数据,仅复现信息结构,不代表最新榜单结果。 The cheapest model changes with the objectiveStep-3 Technical Report · Figure 4 / PDF p.8DEMO DATA$0.1$0.2$0.3$0.4DECODING · 8K0.1140.078DECODING · 32K0.3950.168TRAINING · 8K0.0760.213Pangu Pro MoEStep-3cost per 1M tokens →
Illustrative demo data · renderer: objectiveReversalBars

Information grammar

它如何组织信息

同两模型三场景双条 + 每行赢家箭头 + decoding/training 目标反转

Visual system
VS-77 Step-3 objective reversal bars
Component ID
step3-objective-reversal

Use when

适用判断

适合揭示“训练便宜”不等于“推理解码便宜”;三种成本必须归一到相同 token 口径。

Figure-level evidence

Figure 4 · PDF p.8

Step-3 与 Pangu Pro MoE 在两档 decoding 和一档 training 成本上的相反趋势。

Verified
2026-07-13
Paper source
Step-3 Technical Report

Structured data

可替换的数据模型

示意数据,仅复现信息结构,不代表最新榜单结果。

{
  "scenarios": [
    {
      "label": "DECODING · 8K",
      "a": 0.114,
      "b": 0.078
    },
    {
      "label": "DECODING · 32K",
      "a": 0.395,
      "b": 0.168
    },
    {
      "label": "TRAINING · 8K",
      "a": 0.076,
      "b": 0.213
    }
  ]
}

Related components

同一图表家族的其他语法