Benchmark Atlas

特殊编码与覆盖 · arXiv 论文

Benchmark Domain Treemap

用面积编码题目数量,用颜色区分 STEM、humanities、social science 等上层学科。

treemapcoveragetaxonomy
MMLU task coverage 用面积编码题目数量,用颜色区分 STEM、humanities、social science 等上层学科。 示意数据,仅复现信息结构,不代表最新榜单结果。 MMLU task coverage MMLU DEMO DATA STEM38%Humanities24%Social19%Medicine11%Business8%area = share of benchmark questions
Illustrative demo data · renderer: treemap

Information grammar

它如何组织信息

层级 treemap + 面积样本量 + 色彩学科族

Visual system
VS-39 Academic domain blocks
Component ID
mmlu-domain-treemap

Use when

适用判断

适合说明 benchmark 构成和不平衡;不是得分图。

Source lineage

MMLU

学科域覆盖与宏观能力

Open formal source ↗

Structured data

可替换的数据模型

示意数据,仅复现信息结构,不代表最新榜单结果。

{
  "items": [
    {
      "label": "STEM",
      "value": 38
    },
    {
      "label": "Humanities",
      "value": 24
    },
    {
      "label": "Social",
      "value": 19
    },
    {
      "label": "Medicine",
      "value": 11
    },
    {
      "label": "Business",
      "value": 8
    }
  ]
}

Related components

同一图表家族的其他语法