原创文BFT机器人 近日，2022CSRankings全球计算机专业继续蝉联第一的卡内基梅隆大学，发表了关于四足机器狗的最新研究。 论文地址：https：openreview。netpdf？idRe3NjSwf0WF相关视频：https：visionlocomotion。github。io 卡内基梅隆大学附近的公园最近出现了一道引人注目的风景线。 这个四足机器狗，是阿加瓦尔的新宠，它是一个特别的机器狗。其独特性在于，它与其他严重依赖内置地图才能实现四处走动的机器狗不同，它的行动依赖于内置摄像头，以此达到计算机视觉和强化学习的作用。 阿加瓦尔是卡内基梅隆大学的一名在读博士生，他所在的研究团队开发了一种新型技术可以让机器人利用计算机视觉和强化学习在复杂地形上行走，他们希望这项技术能够帮助机器人更方便部署到融入人们的生活之中。 技术详解 自然界的动物能够依据自身的视觉来捕捉周围环境，从而进行精确而敏捷的运动，复制动物的这项能力一直以来都是机器人领域长期追求的目标。传统的实现方法，是将这个问题分解为高程映射和立足点规划阶段。这种方法的局限在于，高程映射容易出现故障并且会受到噪音影响，并需要搭配专门的硬件。 阿加瓦尔团队研究的这项新技术，开发了一个能够穿越楼梯、路边、垫脚石和缝隙的端到端运动系统，并首次在使用单个前置深度相机的中型四足机器狗上运用了这一技术。 研究人员在模拟中训练，训练包括两个阶段。首先，使用强化学习训练一个具有廉价计算的深度图像变体的策略，然后在第2阶段将其提炼成使用深度学习的最终策略。由此产生的策略无需任何微调就能轻松转移到现实世界中，并且可以穿越各种地形，同时对推动、湿滑表面和岩石地形等扰动具有鲁棒性。 垫脚石和缝隙 该机器狗能够跨过各种配置的酒吧台凳，并调整步幅大小以跨过大间隙。由于后脚附近没有视野，机器狗必须记住酒吧台凳的位置并相应地放置后脚。 楼梯和路边 该机器狗能够爬上24厘米高、30厘米宽的楼梯，同时爬上26厘米高的路边。先前的运动技术，依赖于机器人周围和下方地形的度量高程地图。这种深度图像融合成一个单一的高程图，需要不同时间的摄像机之间的相对姿势来规划脚步和关节角度。因此，在现实世界中需要使用视觉或惯性测距法跟踪以获得这种相对姿势。 （a）机器人尺寸比较（b）由于尺寸形成的挑战（c）新出现的髋关节外展 由于四足机器狗的尺寸相对较小，即使是合理高度的障碍物也无法越过。而这项新技术可以在没有任何先验因素的情况下，穿越复杂地形，使机器人在髋关节高度为28厘米的情况下，能够穿越高度为25厘米的楼梯，相当于其自身身高的89，显著高于任何其他依赖步态先验的现有方法。 研究人员的策略适用于在各种照明条件下的不同楼梯和路边。 在分布不均的楼梯和路缘石上，机器狗最初会被卡住，但最终能够使用紧急攀爬行为穿越它们。 非结构化地形 机器狗可以穿越不属于其训练类别之一的非结构化地形。这显示了新技术系统的泛化能力。 黑暗中的运动 深度相机使用红外光投射图案，即使在几乎没有环境光的情况下也能准确估计深度。 鲁棒性 机器狗训练有素的策略对大力量（从高处投掷5公斤重物）和湿滑表面（水倒在塑料布上）具有鲁棒性。 但也有失败案例 机器人狗从高路边掉下来，由于倾角太大，没有自上而下的摄像头和前置摄像头指向正前方，无法从前置摄像头看到它的范围，机器狗从路边高处台阶掉了下来。 由于从记忆中检索凳子位置错误，机器狗后腿踩到了缺口（相机只能看到前面的凳子）。这是也是研究人员在不同凳子配置的16次运行中，观察到的唯一一次失败运行。 加州大学伯克利分校的研究生AshishKumar说，与市场上现有的机器狗不同，例如波士顿动力公司的spot，它使用内部地图四处移动，而这种机器狗仅使用摄像头来指导其在野外的运动。也有其他使用摄像机提示来引导机器人移动的技术尝试，但仅限于平坦地形，而无法让他们的机器人走上楼梯、爬上石头并跳过缝隙。 这个四足机器狗首先被训练在一个模拟器的不同环境中运动，因此它对在公园里行走或上下楼梯有一个大致的了解。当它被部署在现实世界中时，它前面的单个摄像头的视觉效果会引导它的运动。该机器狗使用强化学习来调整其步态，以在楼梯和不平坦的地面等事物中自由前进（强化学习是一种允许系统通过反复试验改进的人工智能技术）。 学者评价 卡内基梅隆大学助理教授迪帕克帕萨克（DeepakPathak）表示，取消对内部地图的必要需求，这使机器人更加健壮，因为它不再受到地图中潜在错误的限制。 谷歌研究科学家JieTan表示，机器人很难将相机的原始像素转化为在周围环境中导航所需的那种精确和平衡的运动。他说，这项工作是他第一次看到小型低成本机器人展现出如此惊人的机动性。 华盛顿大学研究机器学习和机器人控制的研究员GuanyaShi说，该团队已经实现了机器人学习和自主性的突破。 从事机器学习和机器人技术研究的Facebook人工智能研究部的研究科学家AksharaRai，也对这项新技术表示认可。 这项技术是朝着构建这种有感知力的四足机器人，并将其部署在野外迈出的有希望的一步。Rai说。 未来展望 然而，这项技术目前仍然有所限制。虽然该团队的工作有助于改进机器人的行走方式，但却无法帮助机器人提前确定前进方向。导航对于在现实世界中部署机器人来说是很重要的。Rai说。 在机器狗能够在公园里蹦蹦跳跳或在家里取东西之前，还需要做更多的工作。Tan表示，虽然机器狗可以通过前置摄像头了解深度，但它无法应对湿滑地面或高草丛等情况；它可能会陷入水坑或陷入泥泞。 据悉，这项技术即将在12月14日于新西兰奥克兰举行的2022年机器人学习大会（CoRL2022）上亮相，届时让我们期待该项技术的更多的详情！ 文章参考： https：visionlocomotion。github。io https：www。technologyreview。com202211211063585watchthisrobotdogscrambleovertrickyterrainjustbyusingitscamera 查看本公众号原文尾部获取论文原文pdf 更多精彩内容请关注公众号：BFT机器人 本文为原创文章，版权归BFT机器人所有，如需转载请与我们联系。若您对该文章内容有任何疑问，请与我们联系，将及时回应。
3999元起，华为Mate50E开始预售，网友加钱上Mate今天华为Mate50E开启了预售，128GB版本售价3999元，256GB版本售价4499元，相关配置方面，其采用骁龙778G处理器，6。7英寸居中OLED挖孔屏，2700x1……新年UFC大幕将启张伟丽领衔中国选手拳力出击在2022赛季UFC赛场的中国选手为我们带来了无数的惊喜，这一年，张伟丽、李景亮、闫晓楠们在八角笼中奋战，他们有过身披红旗勇夺金腰带的荣耀，也有过被伤口和争议判罚剥夺胜利的不甘……比真人还性感你相信这是AI画的吗？关注AI绘画技术，在未来它的发展非常广阔，以下是一些可能的趋势：更加智能化的创作：随着AI技术的不断发展，未来的AI绘画技术将越来越智能化，可以通过深度学习和神经网络等技术，提……高债务发展中国家融资难？博鳌报告建议考虑债务绿色互换3月28日3月31日，博鳌亚洲论坛2023年年会在海南博鳌召开。据南都记者了解，这是自新冠疫情暴发以来，博鳌亚洲论坛首次全面恢复线下会议，论坛首日（3月28日）上午新闻发布会暨……克罗地亚vs摩洛哥因为这是两匹黑马的第二次碰面，所以三四强的比赛看起来并不那么重要。不过，球道人依然在按着自己的计划，写下了这一战。莫德里奇和其他几个人，也是他们最后一次参加世界杯的机会。……嫁给大陆男人的4位湾湾女星，个个清纯甜美，婚后却大相径庭湾湾女星好像天生就擅长搞暧昧，擅长谈恋爱，还特别擅长姐弟恋，清纯甜美的外表是她们纵横情场的一大利器。前有小奶狗狙击手萧亚轩，后有一个足球队前男友陈意涵，她们没有一个人是简……时间镜头成年人检验爱情最好的方式，就是睡觉。到了一定年纪才懂得爱情看的不再是山盟海誓，而是细节，是清晨的粥，是半夜的水。如果一个人熟睡时被你吵醒都不会跟你发脾气，而是愿意为你端茶倒水，……著名景区突发大火，浓烟滚滚！官方通报火情2月25日，有网友称广西柳州的著名景区三江布央突发大火网传视频显示疑似侗族传统木结构建筑起火火势较大，现场冒起滚滚黑烟有人员惊慌逃避多辆机动……冰之传奇05在南极过冬是一种怎样的体验？作者：〔美〕琼N。布思译者：李果出版：广西师范大学出版社与世界多数地方相比，这里既寒冷又荒凉。整个南极半岛就是一个奇妙的南方动物群出没的冰雪世界，这里从没有过……4nm的手机芯片！国产封测巨头确认，已具备封测能力在芯片的生产环节中，有三个主要环节，分别是设计、制造、封测。以前的芯片企业，需要自己搞定这三个环节。但现在众多的芯片企业，均只负责中间的一个环节，大家分工合作。比如……迷你罗混搭阿迪耐克引批评C罗回怼他爱穿什么都行近日，C罗母亲晒出与迷你罗的合影，后者着装混搭阿迪耐克引起部分网友批评。C罗本人回应力挺儿子，表示迷你罗想穿什么就穿什么，不需要别人喜欢。C罗母亲多洛雷斯近日发布与迷你罗……最伤胃的坏习惯不吃早餐吃饭不规律，容易引起反应迟钝，工作效率低：人早晨起床后，血糖水平会下降。这时如果不进餐或进食低质餐饮，体内就没有足够的血糖可供消耗，人体会感到倦怠、疲劳、暴躁、易怒，思维无法集……