HuggingFace 每日论文Ye Wang论文90
Ego2Robot:从第一视角人类视频规模化合成机器人数据
原标题:Ego2Robot: Scalable Robot Data Synthesis from Egocentric Human Data
Ego2Robot提出一套将第一视角人类操作视频转换为机器人训练数据的流水线,涵盖动作重定向、机器人手臂视觉合成与多级质量筛选,已生成18,561小时、覆盖15种机器人形态的数据。论文在扩展版RoboTwin2.0中测试视觉、场景、形态和任务语义扰动,报告联合预训练可提升多类分布外泛化,并在真实机器人部署中得到验证。
为什么值得读
机器人基础模型正受限于真实示范数据规模,这项工作提供了18,561小时合成数据及跨形态、跨扰动评测,值得立即检视其泛化收益是否可复现。
标签
机器人学习VLA数据合成模仿学习操作策略分布外泛化RoboTwin2.0具身智能