Runway用互联网视频训机器人,效果几乎追平专业数据
BiRun 讯,Runway 发布机器人模型 Praxis-1,把训练 AI 视频模型的能力用到了真实机器人上。它会先从大量普通视频里学习物体怎么运动、人怎么完成任务,再把这些经验变成机器人的动作。
Runway 做了一项物体放置测试,用互联网视频预训练后,机器人的平均误差是 16.1 厘米;改用专门采集的机器人遥操作视频,误差是 16.0 厘米。测试共做了 93 组评估,两种训练方式的结果几乎打平。
这条路线如果能继续扩大,机器人训练最缺的数据可能一下多出几个数量级。真人遥控机器人采数据,需要设备、场地和人工;普通视频早已遍布互联网。Runway 想做的,就是把这些原本不能直接控制机器人的视频,变成机器人学习动作的训练材料。
Praxis-1 已经在 Noble Machines、Standard Bots 和 Ultra 的多种机器人上测试,包括机械臂、双臂机器人和移动机器人。Runway 还展示了同一套策略从工作室换到厨房继续执行任务。模型目前只开放早期测试申请,权重计划未来几个月公开,参数量和更完整的独立评测还没有公布。
信源
动察 Beating 频道 · 动察 Beating 交流群。
Runway 做了一项物体放置测试,用互联网视频预训练后,机器人的平均误差是 16.1 厘米;改用专门采集的机器人遥操作视频,误差是 16.0 厘米。测试共做了 93 组评估,两种训练方式的结果几乎打平。
这条路线如果能继续扩大,机器人训练最缺的数据可能一下多出几个数量级。真人遥控机器人采数据,需要设备、场地和人工;普通视频早已遍布互联网。Runway 想做的,就是把这些原本不能直接控制机器人的视频,变成机器人学习动作的训练材料。
Praxis-1 已经在 Noble Machines、Standard Bots 和 Ultra 的多种机器人上测试,包括机械臂、双臂机器人和移动机器人。Runway 还展示了同一套策略从工作室换到厨房继续执行任务。模型目前只开放早期测试申请,权重计划未来几个月公开,参数量和更完整的独立评测还没有公布。
信源
动察 Beating 频道 · 动察 Beating 交流群。
评论
0/500
登录 后参与讨论
免责声明:本文内容仅供参考,不构成任何投资建议。
更多快讯