TurtleBot3 三机器人避障视觉语言数据集

计算机视觉
0 下载
2 浏览
2026-11-05

数据集简介

基于模型的避障数据采集

本数据集是在 Isaac Sim 仿真环境中构建的多机器人避障集合,以 TurtleBot3 为平台,采用基于模型随机化的采集流程。当前版本取代了以往的避障集合,提供 2000 条经过验证且同时控制的三机器人回合,按五个质量分箱组织,每个分箱包含 400 条观测结果。采集过程强调回合内三台机器人的同步控制与状态记录,以支持视觉语言模型在复杂避障场景下的训练与评估。

数据组织与文件结构

数据集以 WebDataset 分片和 JSON 文件混合组织,主要文件与目录包括:

  • README.md:说明文件
  • CURRENT_AO_COLLECTION.json:当前集合的元信息
  • COLLECTION_COMPLETE.json:集合完成标记
  • collections/model_based_diverse_2000_20261104_01/COLLECTION_STATUS.json:集合状态
  • collections/model_based_diverse_2000_20261104_01/INPUT_CONTRACT.json:输入契约定义
  • collections/model_based_diverse_2000_20261104_01/audit/layouts/episode_XXXXXX.layout.json:各回合布局审计文件
  • progress.json:包含精确的 tb3_potential_v1 标签与因果高斯平滑结果
  • train 分片为 WebDataset 格式,validation 分片为 JSON 格式

数据集总文件体积为 21.4 GB,公开可下载,非 gated 访问。

模态与模型输入

数据为多模态形式,核心模态包括:

  • RGB 相机图像(RGB224),以 5 Hz 记录,包含八帧因果 VLCM 片段
  • 机器人、目标与团队特征,共九项实测值
  • 仅机器人之间的邻接关系
  • 任务指令(task-only instruction)
  • 物理控制数组,保留 30 Hz 频率
  • JSON 标注文件

模型输入严格限定为相机 RGB、九项实测机器人/目标/团队特征、仅机器人邻接关系以及仅任务指令。训练参考采用 Qwen3-VL-2B,进行仅任务指令的有符号 APF 分类与风险 BCE 训练。

标签与质量控制

progress.json 中提供精确的 tb3_potential_v1 标签,并应用因果高斯平滑处理,碰撞事件标记为 -1。数据按五个质量分箱划分,每个分箱 400 条观测结果,便于按质量分层使用。回合经过验证且三机器人同时受控,保证了多机器人交互场景下数据的一致性与可复现性。

平台查看与访问说明

在 HuggingFace 数据集查看器中,由于 train 分片为 WebDataset 格式而 validation 分片为 JSON 格式,可能出现 FileFormatMismatchBetweenSplitsError。用户可通过 HuggingFace 页面直接下载完整文件,无需申请访问权限。数据集上月下载量为 6,357 次。

基本信息

记录数量2000 条三机器人回合;总文件体积 21.4 GB
文件大小2000 条三机器人回合;总文件体积 21.4 GB
文件格式WebDataset, JSON
数据来源adi2440
数据模态RGB图像、特征向量、JSON标注
采样频率RGB 5 Hz,物理控制 30 Hz
规模2000 条回合
文件体积21.4 GB
许可公开可下载
数据落地页https://huggingface.co/datasets/adi2440/tb3-isaac-avoid-obstacles-vlcm
发布日期2026-11-05
TurtleBot3多机器人避障视觉语言模型Isaac Sim强化学习

上架信息

数据集市运营
平台统一选品上架,经质量审核后公开
0 次下载

价格

免费