TurtleBot3 三机器人避障视觉语言数据集
计算机视觉
0 下载
2 浏览
2026-11-05
数据集简介
基于模型的避障数据采集
本数据集是在 Isaac Sim 仿真环境中构建的多机器人避障集合,以 TurtleBot3 为平台,采用基于模型随机化的采集流程。当前版本取代了以往的避障集合,提供 2000 条经过验证且同时控制的三机器人回合,按五个质量分箱组织,每个分箱包含 400 条观测结果。采集过程强调回合内三台机器人的同步控制与状态记录,以支持视觉语言模型在复杂避障场景下的训练与评估。
数据组织与文件结构
数据集以 WebDataset 分片和 JSON 文件混合组织,主要文件与目录包括:
README.md:说明文件CURRENT_AO_COLLECTION.json:当前集合的元信息COLLECTION_COMPLETE.json:集合完成标记collections/model_based_diverse_2000_20261104_01/COLLECTION_STATUS.json:集合状态collections/model_based_diverse_2000_20261104_01/INPUT_CONTRACT.json:输入契约定义collections/model_based_diverse_2000_20261104_01/audit/layouts/episode_XXXXXX.layout.json:各回合布局审计文件progress.json:包含精确的tb3_potential_v1标签与因果高斯平滑结果- train 分片为 WebDataset 格式,validation 分片为 JSON 格式
数据集总文件体积为 21.4 GB,公开可下载,非 gated 访问。
模态与模型输入
数据为多模态形式,核心模态包括:
- RGB 相机图像(RGB224),以 5 Hz 记录,包含八帧因果 VLCM 片段
- 机器人、目标与团队特征,共九项实测值
- 仅机器人之间的邻接关系
- 任务指令(task-only instruction)
- 物理控制数组,保留 30 Hz 频率
- JSON 标注文件
模型输入严格限定为相机 RGB、九项实测机器人/目标/团队特征、仅机器人邻接关系以及仅任务指令。训练参考采用 Qwen3-VL-2B,进行仅任务指令的有符号 APF 分类与风险 BCE 训练。
标签与质量控制
progress.json 中提供精确的 tb3_potential_v1 标签,并应用因果高斯平滑处理,碰撞事件标记为 -1。数据按五个质量分箱划分,每个分箱 400 条观测结果,便于按质量分层使用。回合经过验证且三机器人同时受控,保证了多机器人交互场景下数据的一致性与可复现性。
平台查看与访问说明
在 HuggingFace 数据集查看器中,由于 train 分片为 WebDataset 格式而 validation 分片为 JSON 格式,可能出现 FileFormatMismatchBetweenSplitsError。用户可通过 HuggingFace 页面直接下载完整文件,无需申请访问权限。数据集上月下载量为 6,357 次。
基本信息
记录数量2000 条三机器人回合;总文件体积 21.4 GB
文件大小2000 条三机器人回合;总文件体积 21.4 GB
文件格式WebDataset, JSON
数据来源adi2440
数据模态RGB图像、特征向量、JSON标注
采样频率RGB 5 Hz,物理控制 30 Hz
规模2000 条回合
文件体积21.4 GB
许可公开可下载
数据落地页https://huggingface.co/datasets/adi2440/tb3-isaac-avoid-obstacles-vlcm
发布日期2026-11-05
TurtleBot3多机器人避障视觉语言模型Isaac Sim强化学习
上架信息
数据集市运营
平台统一选品上架,经质量审核后公开
0 次下载