Benchmark Atlas

诊断与矩阵 · 研究博客

Behavior Quadrant

将 patch precision 与 repository exploration 交叉,定位“乱改”“过早收敛”等 Agent 行为。

quadrantbehavioragent
Patch precision vs exploration 将 patch precision 与 repository exploration 交叉,定位“乱改”“过早收敛”等 Agent 行为。 示意数据,仅复现信息结构,不代表最新榜单结果。 Patch precision vs exploration Cognition / SWE research DEMO DATA PRECISE + EXPLORATORYLOW-SIGNAL EDITING404060608080ABCDEF
Illustrative demo data · renderer: quadrant

Information grammar

它如何组织信息

四象限散点 + 密度阴影 + 策略标签

Visual system
VS-30 Research behavior field
Component ID
swebench-behavior-quadrant

Use when

适用判断

适合行为诊断和 policy comparison;象限阈值必须有依据。

Source lineage

Cognition / SWE research

行为散点、分布诊断与训练过程

Open formal source ↗

Structured data

可替换的数据模型

示意数据,仅复现信息结构,不代表最新榜单结果。

{
  "xThreshold": 55,
  "yThreshold": 60,
  "points": [
    {
      "label": "A",
      "x": 74,
      "y": 81
    },
    {
      "label": "B",
      "x": 62,
      "y": 54
    },
    {
      "label": "C",
      "x": 46,
      "y": 72
    },
    {
      "label": "D",
      "x": 38,
      "y": 44
    },
    {
      "label": "E",
      "x": 83,
      "y": 66
    },
    {
      "label": "F",
      "x": 57,
      "y": 76
    }
  ]
}

Related components

同一图表家族的其他语法