大晓机器人 ACE-Ego-Hand 实现双手 3D 手形重建,推理提速约 33 倍
金十数据 9 月 2 日讯,大晓机器人联合香港中文大学、南洋理工大学等机构,开源了面向第一视角视频的双手 3D 形状重建模型 ACE-Ego-Hand,并已产出约 5000 小时训练数据。该模型将视频扩散模型改造为确定性几何编码器,以单次前馈替代多步去噪,推理提速约 33 倍。据悉,该技术能直接将人类第一视角操作视频转化为结构化 3D 轨迹并迁移至灵巧手,大幅降低具身智能模仿学习的数据采集门槛。
金十数据 9 月 2 日讯,大晓机器人联合香港中文大学、南洋理工大学等机构,开源了面向第一视角视频的双手 3D 形状重建模型 ACE-Ego-Hand,并已产出约 5000 小时训练数据。该模型将视频扩散模型改造为确定性几何编码器,以单次前馈替代多步去噪,推理提速约 33 倍。据悉,该技术能直接将人类第一视角操作视频转化为结构化 3D 轨迹并迁移至灵巧手,大幅降低具身智能模仿学习的数据采集门槛。