阅读原文
HuggingFace 每日论文Ye Wang论文90

Ego2Robot:从第一视角人类视频规模化合成机器人数据

原标题:Ego2Robot: Scalable Robot Data Synthesis from Egocentric Human Data

Ego2Robot提出一套将第一视角人类操作视频转换为机器人训练数据的流水线,涵盖动作重定向、机器人手臂视觉合成与多级质量筛选,已生成18,561小时、覆盖15种机器人形态的数据。论文在扩展版RoboTwin2.0中测试视觉、场景、形态和任务语义扰动,报告联合预训练可提升多类分布外泛化,并在真实机器人部署中得到验证。

为什么值得读

机器人基础模型正受限于真实示范数据规模,这项工作提供了18,561小时合成数据及跨形态、跨扰动评测,值得立即检视其泛化收益是否可复现。

标签

机器人学习VLA数据合成模仿学习操作策略分布外泛化RoboTwin2.0具身智能