李飞飞团队联合英伟达等发布SimFoundry,可由真实视频生成机器人仿真环境

李飞飞团队联合英伟达GEAR实验室、佐治亚理工大学等机构发布机器人仿真系统SimFoundry,提出Real2Sim流程。该系统可基于一段真实世界视频解析场景物体的几何、物理属性与交互功能,构建数字孪生,并自动生成不同外观、布局和任务的“数字表亲”,用于机器人策略训练与评测。实验显示,仿真评测结果与真实表现具有较高一致性,基于生成数据训练的策略可在多步操作、双臂协作等任务中实现零样本迁移。论文已发布于arXiv。

上一篇:

下一篇:

发表回复

登录后才能评论