中文版 | ENGLISH

您好!欢迎访问火狐体育地址官方网站!!!!

国内化工原料质量信得过单位注重工作细节,提高服务品质

产品中心

联系我们| CONTACT US

联系电话:
+86-0559-3518000

火狐体育地址

■ 销售部

电话:0559-3518000 

手机:17805599966

邮箱:sale.xy2@0559hy.com 

■ 行政部

电话:0559-3517138

邮箱:office@0559hy.com 

■ 人力资源部

电话:0559-3516520

邮箱:hr@0559hy.com


当前位置:首页 > 产品中心

跨石滩、过草地、负重 12kgUC 伯克利等研发新型机器人运动算法实时快速适应变

发布时间:2021-11-30 04:28:39   作者:火狐体育在线投注   来源:火狐电竞官网

  UC 伯克利、CMU 和 FAIR 推出的快速运动适应(RMA)算法,可以使四足机器人实时、在线地适应未见过的地形环境,性能表现显著优于其他腿式机器人。

  说到腿式机器人,机器之心以前介绍过不少,如能跑、能跳、能跳绳、跨越障碍的 Spot 机器狗,不用摄像头和激光雷达凭感觉「越野」的 ANYmal 机器人、会翻跟斗的 MIT 机器人,等等。

  这些腿式机器人都有一定的适应外部环境的能力,但还不够。腿式机器人在现实世界的成功部署需要其实时适应未见过和不断变化的场景,如多样化的地形、不同重量的负载以及不同程度的磨损。

  近日,来自 UC 伯克利、CMU 和 FAIR 的研究者们在腿式机器人实时、智能适应具有挑战性、陌生的地形和环境方面取得了重大突破,推出了一种快速运动适应(Rapid Motor Adaptation, RMA)算法。该算法包含两个子策略,其一是使用强化学习训练的基本策略(base policy)和使用监督学习训练的适应模块(adaptation module),二者完全在模拟中学习。在 RMA 算法加持下,四足机器人拥有了所有智能体共有的适应环境因素的能力。

  以往的四足机器人要么已经针对它们所要适应的环境进行了完全手动编码,要么通过手动编码和学习技巧的结合来教它们在环境中导航。与这些不同,RMA 是首个完全基于学习的系统,通过探索并与世界进行交互,使腿式机器人能够从头开始适应环境。

  具体来讲,RMA 在不使用任何领域知识(如基准轨迹或预定义的足轨迹生成器)的情况下完全在模拟中训练,并且无需任何微调即可以部署在 Unitree 的 A1 机器人上。

  研究者在各种地形生成器上训练 RMA,包括乱石滩、泥地、不平整草地、混凝土地、鹅卵石地、石阶和沙滩等。结果表明,RMA 在不同的现实环境和模拟实验中都实现了优于其他腿式机器人的性能。

  此外,RMA 中的适应模块至关重要。测试表明,有适应模块的四足机器人可以负载 8 千克的重量,无适应模块的则负载不了这个重量。

  对于这款能够适应复杂多变环境的四足机器人,网友表示:「我满脑子想到的都是电视剧《黑镜》里面的机器狗……」

  手动编码的改进可以提高机器人在受控环境中的性能,但是想要机器人真正的适合现实世界中的变化,唯一的方法是教机器人真正的适应环境,类似于人类的学习方式。

  想要赋予机器人适应不断变化世界的能力,研究者需要通过数百万次重复实验来教他们,而做到这一点的最佳方法不是在现实世界中,在现实世界中机器人可能会在学习过程中损坏或磨损,研究者是在模拟环境中进行的。

  然而,这些机器人在模拟环境中学习技能,当部署到现实环境中会出现很多挑战。在模拟环境中,机器人的物理结构和模型往往在微小但重要的方面有所不同。例如,在发送控制信号和执行器移动之间可能有轻微的延迟,或者脚上的磨损使它比以前更滑,或者关节的角度可能偏差了百分之一度。

  物理世界本身也呈现出一些复杂的情况,以自由空间中移动的刚体为模型的模拟器无法准确捕捉到这些复杂情况。床垫或泥坑等表面接触后会变形。在模拟中相当标准化的环境在现实世界中变得更加多样化和复杂,如果考虑到室内和室外空间中可能存在的大量地形,情况就更加复杂了。当然,现实世界中的因素从来都不是静态的,所以腿式机器人能够掌握的现实世界环境可能与大不相同。

  当然,不能仅仅用这个基本策略来部署机器人,因为我们不知道它在现实世界中会遇到什么外部特性。因此,研究者依赖于机器人在周围环境中自己学到的信息,即机器人最近的运动信息。我们知道关节的实际运动和来自命令的预期运动之间的差异依赖于这些外部特性。例如,突然的腿部障碍物会使机器人停止,但同时也会显示其周围地面高度的信息。同样,在柔软的表面上,机器人腿会随着脚下沉而伸展得更远,而在坚硬的表面上,机器人会快速的停止。

  由于我们知道机器人在模拟中遇到的实际外部特性,我们可以使用监督学习训练自适应模块,从机器人最近的历史状态预测当前行为。

  相比较而言,先前基于 RL 的方法训练的机器人需要几分钟时间,有时还需要人工干预才能适应新条件,使得这些机器人在现实世界中不现实。

  当部署支持 RMA 的机器人时,基本策略和适应模块协同异步工作(基本策略以更快的速度运行,适应模块以更慢的速度运行),以使机器人能够在没有任何微调的情况下执行鲁棒和自适应的移动。异步运行两种策略并以本质上不同的频率运行还有助于使用小型机载计算部署 RMA。小的基本策略可以保持机器人以高频行走,而较大的适应模块可以以低频发送外部向量。异步运行这两个策略还为有些不可预测的硬件速度和时间增加了鲁棒性。

  实验表明,RMA 支持的机器人成功地在几个具有挑战性的环境中行走,表现优于 non-RMA 部署的机器人,与 Unitree 机器人相媲美,甚至是优于 Unitree 机器人。研究者使用相同的策略执行所有现实世界的部署,而不需要任何模拟校准或现实世界的微调。

  在所有的试验中,这个机器人能够在沙子上、泥土里、徒步小径上、高草丛和土堆上行走,没有一次失败。在 70% 的试验中,这个机器人成功地沿着一条徒步路线% 的试验中,它成功地通过了一堆水泥和一堆鹅卵石,尽管在训练中从未见过这种不稳定或下沉的地面、阻塞的植被或台阶。当它以 12 公斤的有效载荷(相当于其体重的 100%)移动时,它也能以很高的成功率保持高度。

  除了机器人技术之外,RMA 还指出了构建 AI 系统的方法,该系统可以通过利用动态数据来了解特定算法运行的上下文,从而实时适应许多困难的挑战。

  作为新基建重要领域,人工智能(AI)正渗透到社会生活各个领域。在万物互联的时代大背景下,合作共赢是行业发展的新趋势。惠普工作站现发起 # 合作伙伴招募计划 #,诚邀每个深耕人工智能领域的企业合作,一起探索更多 AI 行业发展新机遇。

  作为惠普工作站合作伙伴,将有机会获得惠普免费样机测试支持;与惠普共同打造创新解决方案,联合推广、合作开拓商机,助力行业发展,实现共赢;还有机会与国内 / 国际人工智能领域专家交流,获得第一线行业资讯。



火狐体育地址 版权所有  公司地址:安徽省黄山市循环经济园紫金路16号     

电话:0086-559-3518000  手机:0086-13956270168 传真:0086-559-3516788

电子邮箱:sale.xy2@0559hy.com