RoboTwin 2.0 双臂机器人真值回放数据集
机器学习
0 下载
11 浏览
2026-09-29
数据集简介
目录结构
数据以 episode 为单位组织,每个 episode 对应一个 HDF5 文件,按机器人本体分为 Agilex 与 Franka 两组,共 4800 个文件。仓库同时提供 parquet 格式的索引视图,HuggingFace Dataset Viewer 中可见 default 子集、train 划分,约 585k 行(默认展示前 3.04k 行)。页面标注体量区间为 100K - 1M。
数据内容
每个 HDF5 文件记录该 episode 前 132 帧 head_camera 的真值,主要字段如下:
| 字段 | 说明 |
|---|---|
| endpose | 末端位姿,含 left_endpose 与 right_endpose |
| joint_action | 关节动作,含 left_arm、left_gripper、right_arm、right_gripper |
| observation | 观测数据,head_camera 下含 actor_segmentation |
| pointcloud | 点云,以 2D 数组存储 |
数据模态为表格化 episode 数据,点云、相机分割 ID、末端位姿与关节动作均在同一文件中对齐存放。
补充真值:位姿、分割 ID、手腕相机
除基础位姿与动作外,该导出补充了相机分割 ID 与手腕相机相关真值,使下游 probing 可以直接使用与仿真器一致的物理量,而不必依赖从 RGB 图像反推。
帧数与对齐帧
每个 episode 只导出前 132 帧,所有字段按同一帧序列对齐,便于在固定长度窗口上做逐帧特征提取与对比。
用真值 RGB 重新提取特征
由于每帧的 head_camera RGB 来自物理回放的真值渲染,可直接用这批 RGB 重新提取 OpenWAM 等表征的特征,再与真值位姿、分割 ID 对照,完成下游 probing 评测。
与官方数据的差异
回放得到的物体变体与官方数据并非完全一致,其中 5 个任务存在物体变体差异;此外,部分 episode 在回放中未复现任务成功状态。使用时应以本仓库的真值字段为准,并注意这些与官方轨迹的偏差。
版本与复现
当前导出状态为已完成,4800 个 HDF5 全部通过结构检查,上传后均以 sha256 校验。数据集采用 MIT 许可,在 HuggingFace 数据集仓库公开并可免费下载;页面发布日期为 2026-09-29。
基本信息
记录数量未知
文件大小未知
文件格式HDF5, Parquet
数据来源lishanyang
许可MIT
样本数量4800 个 episode
机器人本体Agilex、Franka
帧数每 episode 132 帧
子集与划分default / train
数据落地页https://huggingface.co/datasets/lishanyang/openwam-robotwin-gt
发布日期2026-09-29
双臂机器人模仿学习真值回放RoboTwin 2.0表征评测
上架信息
数据集市运营
平台统一选品上架,经质量审核后公开
0 次下载