所有评测
综合指数开放性

模型开放性指数

从模型可获得性、许可条件、训练数据透明度和方法透明度衡量开放程度,并统一换算为 0–100 分。

开放性指数分(0–100)数值越高越好

评测要点

评测设置一览

01
总分范围
0–100
02
底层满分
18 分
03
模型可获得性
最高 6 分
04
模型透明度
最高 12 分
05
单项评分
0–3 级

完整测评方法

从测试对象到评分与结果解释,逐步说明这一指标是如何形成的。

评测背景

开放性同时包含“能否获得并使用模型”和“能否理解、复现或扩展模型”两部分。前者考察权重与许可,后者考察训练数据、方法披露和相应许可。

每个模型仅依据其第一方公开信息评定;增量版本只采用明确适用于该版本的披露。

能力范围

  • 模型权重的可获得程度与使用限制
  • 预训练和后训练数据的披露、共享与许可
  • 架构、技术细节和端到端训练方法的公开程度

测试设置

  • 为权重访问、权重许可、数据访问、数据许可、方法披露和方法许可建立 0–3 级原型。
  • 收集并核对模型发布方针对当前版本公开的第一方资料。
  • 衍生模型会受到基础模型许可与披露程度的约束。

运行流程

  • 按最匹配的开放性原型为每个组成项评分。
  • 预训练与后训练的数据项先取平均,使数据部分合计最高 6 分。
  • 将所有组成项相加得到最高 18 分的底层成绩,再归一化至 0–100。

计分方式

  • 权重访问:0 为封闭且无托管访问,1 为封闭且托管访问限制 token 可见性,2 为封闭但可托管访问,3 为开放权重。
  • 许可等级从 0 到 3 依次体现商业使用、署名要求与实质性限制的减少。
  • 数据访问从有限披露到完整共享为 0–3;方法披露从有限信息到完整技术细节为 0–3。
  • 方法许可单独按 0–3 评分:0 为未发布代码,1 为公开且允许商业使用的框架,2 为发布端到端训练管线代码或指南,3 为发布该管线并允许商业使用。
  • 归一化公式为底层总分 ÷ 18 × 100,数值越高越开放。

结果呈现

  • 报告 0–100 的总指数和最高 18 分的组成贡献。
  • 分别展示模型可获得性、模型透明度、预训练数据与后训练数据明细。
  • 提供开放性与智力、发布日期的对照视图。

解读限制

  • 评分依赖当前公开披露;未公开不等同于实际不存在。
  • 定性原型能够统一比较,但无法消除边界案例中的判断空间。
  • 增量版本若未明确继承旧版披露,对应项目不会自动沿用。