DeepMind发展可控制各种机器人的AI模型

on

|

views

and

comments

DeepMind联手超过30个学术实验室,发展跨型态机器人学习资源,收集多种不同型态的机器人资料,创建了一个称为Open X-Embodiment资料集,并且以此资料集训练了机器人Transformer模型RT-X,该模型可以在多种机器人型态间传递技能,核心目标是要让单一模型可以控制不同类型的机器人。

过去,当机器人、任务或是环境稍有变化,研究人员就需要重新训练机器人模型,而为了解决更改单一变数,就要从头开始训练模型的麻烦,DeepMind想要发展通用机器人技术,而训练通用机器人模型,建立多样化机器人演示资料集是关键步骤,如此才能使模型可以控制不同类型的机器人,遵循不同的指令,对复杂的任务进行基本推理,并且有效地泛化技能。

不过,这对单一实验室来说是非常耗费资源的工作,於是DeepMind肩负起建立Open X-Embodiment资料集的任务,和33个学术实验室合作,从22个型态的机器人收集资料,资料集范围涵盖500种技能和15万项任务,总计超过100万个场景。这是目前同类型中,最完善的机器人资料集。

而RT-X则是以DeepMind的RT-1和RT-2机器人Transformer模型,所训练的通用机器人模型,RT-1是DeepMind大规模用於真实世界的机器人控制模型,进一步训练成为RT-1-X,而RT-2则是视觉、语言与动作(VLA)模型,可以从网路和机器人资料中学习,DeepMind使用该模型训练出RT-2-X。

透过引入更多样化和跨型态的训练资料集,RT-1-X和RT-2-X达到更佳的性能,相较於只在特定领域训练的模型,RT-X展示更高的泛化和新增技能的能力。当研究人员将RT-1-X与专为特定任务开发的模型进行比较时,他们发现利用Open X-Embodiment资料集训练的RT-1-X,在性能上平均超越原始模型50%。

此外,研究人员也深入探讨机器人之间的知识转移。他们进行一系列的实验,其中涉及的技能和物体在RT-2资料集中不存在,但是在其他机器人资料集中出现,而实验结果发现,RT-2-X模型在新技能方面的表现是RT-2模型的3倍。这代表结合多平台的资料进行训练,RT-2-X成功学习到原始资料集中所没有的技能(下图)。

这篇研究的重要性在於,透过使用更多样化的资料和先进模型,研究人员可以开发出更有用的辅助机器人,同时,还证明了跨型态机器人通用模型的可行性,能够大幅提升DeepMind和各种机器人的运作表现。DeepMind目前已向社群公开Open X-Embodiment资料集和RT-1-X模型,以促进机器人技术的研究。

李建兴

热门文章

达发科技AI卫星定位晶片获机器人大厂Segway采用!有何特色?

达发科技,已研发出AI卫星定位晶片「AG3335A」,其具备公分级高精度RTK(Real Time Kinematic)卫星定位能力,现已获机器人大厂赛格威(Segway)投入Segway Navimow i系列「无线割草机器人」使用,该款机器人标榜多种户外,可能受遮蔽物干扰卫星讯号的地方,也能精准输出数据。

德凯携手TTC共推台湾AI/资通安全/低轨卫星验测技术

为推进台湾人工智慧(AI)安全(Safety)、资通安全(Security)与低轨卫星(LEO)等验测技术之发...

AI 晶片需求暴增,华为暂缓高阶手机生产

由於中国市场对华为 AI 晶片需求飙升,加上良率限制,迫使中国科技巨头必须考虑优先满足 AI 晶片需求,进而暂缓高阶手机 Mate 60 系列生产。 《路透社》引述知情人士的消息指出,华为将会优先生产昇腾(Ascend)AI 晶片而非麒麟(Kirin)晶片,因此 Mate 60 系列生产将会受到影响...

最新文章

相关推荐

0 0 投票数
Article Rating
订阅评论
提醒
guest
0 Comments
内联反馈
查看所有评论
0
希望看到您的想法,请您发表评论x