9月2日,大曉機器人聯合香港中文大學、南洋理工大學等機構開源雙手3D形狀重建模型ACE-Ego-Hand,已産出約5000小時訓練數據,推理提速約33倍,可大幅降低具身智能模仿學習的數據采集門檻。
觀點網訊:9月2日,大曉機器人聯合香港中文大學、南洋理工大學等機構,開源了面向第一視角視頻的雙手3D形狀重建模型ACE-Ego-Hand。
該模型可将人類第一視角操作視頻直接轉化為結構化3D軌迹,並支持将軌迹遷移至靈巧手,從而大幅降低具身智能模仿學習的數據采集門檻。
技術層面,ACE-Ego-Hand将視頻擴散模型改造為确定性幾何編碼器,以單次前饋替代多步去噪,推理提速約33倍。
具身智能模仿學習長期面臨數據采集成本高、效率低的行業瓶頸,傳統方式依賴人工采集操作數據,難以支撐大規模模型訓練。第一視角視頻轉3D軌迹的路線,為數據生産提供了更低門檻的方案。
對靈巧手研發企業而言,該模型意味着可通過普通第一視角視頻批量生成訓練軌迹,降低數據獲取成本。
對具身智能産業而言,該模型已産出約5000小時訓練數據,其開源有望推動行業數據共享,但實際效果仍需觀察。
免責聲明:本文内容與數據由觀點根據公開信息整理,不構成投資建議,使用前請核實。
審校:彭依柔
