AndroidLife 移动智能体 60 项任务评测样本
数据集简介
任务样本与数据结构
数据集主体是 AndroidLife 的公开 60 项任务样本,任务定义与 sidecar 附属文件一同发布。任务表包含 tasks 与 tasks_full 两个子集,各 60 行;划分上仅有 train 一个 split,共 60 行。
tasks 子集给出的字段覆盖了任务的关键属性:
task_id:任务标识day:任务所属日程天bucket:任务分组difficulty:难度档位(easy / medium / hard)points:任务分值(1 / 3 / 5)app:涉及的应用ahi:任务相关指标字段interaction:交互方式is_ask_user:是否需要向用户提问cross_app_required:是否要求跨应用完成prompt_text:任务提示词apps:涉及的应用集合
tasks_full 子集提供同一批 60 项任务的完整版任务定义,与 tasks 配合使用可同时获得精简视图与完整字段。
任务覆盖的应用与难度设计
任务场景横跨日历、通讯录、文件、Google Drive、Photos、Telegram 等应用,既包含单应用内的操作,也包含需要跨应用衔接的复合流程。难度与分值的对应关系为 easy / medium / hard 三档,对应 1 / 3 / 5 分,分值随难度递增,便于按难度加权统计评测结果。字段 cross_app_required 与 is_ask_user 分别刻画任务是否必须跨应用、是否需要主动向用户确认,这两类属性使任务集能够区分纯执行型与交互型任务。
真机运行轨迹
除任务定义外,数据集还附带真实手机上的基准执行产物:测试设备为 OnePlus CPH2423,通过 ADB/MobileRun 连接,由真实大模型驱动完成各次运行,逐次运行的执行产物完整保留。轨迹中包含运行过程中的页面截图,因此页面标注的模态为图像、表格与文本三类。这些轨迹记录的是模型在真实设备上的实际操作过程,而非模拟环境中的合成结果。
文件格式与获取方式
数据以 parquet、json、png 三种格式组织:任务定义以 parquet 表格形式提供(由平台自动转换),任务提示词等以文本形式呈现,运行轨迹中的截图以 png 图像保存。数据集在 HuggingFace 上公开,可通过 Dataset Viewer、Data Studio 与 Files and versions 页面浏览和下载,免费且无需申请。整体规模小于 1K 行,许可为 CC BY 4.0。
引用与许可
使用本数据集时请遵循 CC BY 4.0 许可要求并注明出处:AndroidLife 项目,发布者为 YuvrajSingh9886(HuggingFace)。数据集页面地址为 https://huggingface.co/datasets/YuvrajSingh9886/androidlife-public。