ACE-Data-0:在真实家中同步捕捉视觉、运动与触觉,填补具身数据鸿沟
具身智能面临数据瓶颈:现有数据集要么缺少运动真值,要么脱离真实家居环境,且大多只覆盖秒级原子动作。ACE-Data-0通过环境捕捉引擎ACE,在真实公寓中同步采集第一人称视频、全身运动、物体轨迹、音频和触觉信号,构建了包含17M帧、75000个交互片段的长程数据集。论文建立三级分层基准,从触觉推断、人体运动估计到手物交互估计,系统评估了感知-行动循环。基准测试显示,现有模型在真实家居遮挡和长程任务下仍有显著提升空间。注意:数据集目前仅覆盖2个环境和50名参与者,场景多样性有限;触觉手套和动捕服可能对自然行为产生轻微干扰。