RoboPro 机器人操作多任务 rollout 与专家
数据集简介
数据组织与目录结构
数据按任务建立顶层目录,每个任务下再按 rollout 版本、数据划分与随机种子逐层展开,形成可直接定位到单条 episode 的路径结构:
- 轨迹数据:
<task>/rollouts_jax30000/clean/seed{N}/data/episode{M}.hdf5 - 视频数据:
<task>/rollouts_jax30000/clean/seed{N}/video/episode{M}.mp4 - d10 划分下的轨迹:
<task>/rollouts_jax30000/d10/seed{N}/data/episode{M}.hdf5 - d10 划分下的视频:
<task>/rollouts_jax30000/d10/seed{N}/video/episode{M}.mp4
同一 episode 的轨迹与视频通过相同的任务名、划分、seed 与 episode 编号一一对应,便于按 episode 对齐状态序列与视觉观测。仓库中还包含 reports/ 目录。
任务覆盖
任务目录覆盖多类桌面与冰箱场景的抓取、移动、放置操作,包括:
drop_apple_in_bin_ks、milktea_next_to_laptop、milktea_on_shelf、move_pen_to_box、move_seal_next_to_box、move_seal_onto_table、phone_next_to_cube、phone_on_holder、pick_apple_from_bowl_ks、pick_bottle_from_fridge、pick_boxdrink_from_basket、put_bottle_in_basket、put_bottle_in_fridge、put_bread_on_board_ks、put_phone_on_holder_ms3。
其中 put_phone_on_holder_ms3 为 ms3 任务,采用 LeRobot 格式的专家演示,包含 joint_action 与 measured state,共 95 个 episode。
数据划分与版本
数据在任务之下区分 clean(干净段)与 d10 两类划分,并按 seed 编号分组,同一任务可在不同 seed 下提供多组 rollout。轨迹以 hdf5 存储,视频以 mp4 存储,模态上覆盖文本与视频。仓库持续更新,累计提交记录为 245 commits,其中包含按任务分组 rollout 的整理提交。
规模与获取方式
数据集总量约 1.05 TB,公开可访问、无需申请(not gated、public),页面未标注许可协议。可通过 HuggingFace 仓库页面浏览文件与版本历史,并直接下载所需任务目录下的 hdf5 轨迹与 mp4 视频。