Chess Arena 对局结果与棋手评分数据
数据集简介
Chess Arena 结果记录
Chess Arena 中每一局已结束的对局都会落到本数据集中。这样做的原因很直接:Space 没有能够在重启后保留的文件系统,排行榜若只存在于内存中,一次重启就会归零。因此对局结果被单独保存在仓库里,Space 启动时读取,每局结束几秒后写回,使排行榜能够跨重启、休眠与重建延续。
数据只追加,Arena 内没有任何操作可以删除一条结果。
记录格式
results.json 是一个 JSON 数组,每个元素代表一局对战,为 3 元组,位置含义固定:
| 位置 | 含义 | 取值 |
|---|---|---|
| 0 | 执白玩家 id | 玩家标识字符串 |
| 1 | 执黑玩家 id | 玩家标识字符串 |
| 2 | 白方视角结果 | 1.0 白胜、0.5 和棋、0.0 黑胜 |
内置玩家 id 包括 chessmamba2、chess-llama、chessaggro、chessslm、chessgpt、chessformer、bluesunflower、chesspythia、engine-1、engine-2、engine-3、engine-4 与 random。运行期间新加入的玩家以 hub:owner/name 的形式记录。
仓库中另有 archive/results_before_gpu_fix_2026-09-06.json,保留了一次修正前的历史结果。
评分如何算出
评分不是逐局累加,而是把全部对局放在一起,在 Bradley-Terry 模型下用最大似然一次性拟合。模型给出每名棋手(模型)的相对强度,再通过尺度锚定使全体平均分为 1500。这样,新增对局不会只影响参与的两方,而是整体重新求解。
如何读取
results.json 与 README.md 都是仓库文件,可在 HuggingFace 页面的 Files and versions 中获取,也可通过 Dataset Viewer 查看。数据以 MIT 许可开放,private=false、gated=false,无需申请即可访问。
使用时的注意点
结果只记录胜负与双方 id,不包含对局时间戳与棋谱着法,因此无法据此复盘具体棋局。结果自对局结束后几秒才写回,读取时可能尚未包含刚刚结束的一局。archive 目录下的文件是修正前的历史版本,与当前 results.json 不是同一份数据,混用会重复计数。评分依赖全部对局共同拟合,只取部分对局计算出的分数与完整数据下的分数不可直接比较。