新的机器人遥控系统通过摄像头转换动作

robte1-scaled-1
甚至使机器人系统引人注目的是,它完全是通过一系列 YouTube 视频进行训练的,这些视频显示了个人进行手臂动作。

可控机器人对我们来说有着光明的未来,但今天的当前模型对于未经训练的用户来说可能很难控制。它们通常涉及复杂的电子设备来操作,但随着卡内基梅隆大学的一组研究人员启动的系统——机器人远程运动,这种情况即将改变。

除了远程控制机器人的能力之外,关于这种机器人心灵感应系统的另一个令人兴奋的消息是它能够通过 RGB摄像头转换用户的动作。机械手和手臂将通过简单地演示特定动作来复制动作。这使得它不同于以前的发明,这些发明通常利用复杂的系统来控制机器人,如遥控器和其他设备。

“该领域的先前工作依赖于手套、运动标记或校准的多摄像头设置,”该团队的一名研究人员 Deepak Pathak 告诉TechXplore。“相反,我们的系统使用单个未校准的相机工作。由于不需要校准,用户可以站在任何地方,仍然可以成功遥控机器人。”

根据 Pathak 的说法,甚至使机器人系统引人注目的是,它完全是通过一系列YouTube视频进行训练的,这些视频显示了个人进行手臂动作。Pathak 说它可以分析简单的二维图像,使其成为任何人都非常简单的技术——即使是没有实践过的人。他说,团队必须专注于计算机视觉和 3D 人体姿势估计。

“巨大的被动视频数据的多样性有助于它在未经训练的用户、任务和对象之间工作,”Pathak 说。“我们的系统提供了一种低成本且自然的方式来通过演示来教机器人,而不是动觉地握住机器人或戴上手套或动作捕捉服……希望我们最近的工作只是互联网视频未来的众多方向之一作为机器人控制的丰富监督来源,除了机器人视觉。”

有了所有这些东西,研究人员认为该技术在日常情况下很有用,特别是对于可能对人类存在危险的任务。 

“机器人心灵感应和类似技术将使机器人能够在更广泛的环境中进行教学,包括在家庭中,他们将被期望执行日常任务。” Pathak 说:“仅使用一个未经校准的摄像头,我们的系统理论上可以在世界任何地方进行控制,因此任何人都可以更轻松地进行机器人教学。我们现在正在使用我们的机器人心灵感应系统收集大规模数据,以教机器人在现实世界中自主行动和适应。”

原创文章,作者:校长,如若转载,请注明出处:https://www.yundongfang.com/Yun140437.html

(0)
打赏 微信扫一扫不于多少! 微信扫一扫不于多少! 支付宝扫一扫礼轻情意重 支付宝扫一扫礼轻情意重
上一篇 2022年3月21日 上午10:54
下一篇 2022年3月21日

相关推荐