展开菜单
首页 精品内容 本月促销 装机必备 Windows PDF教程 macOS软件 IOS软件 Android AI 专题
全部分类

当前位置:

首页 > 业界资讯 > 机器人落地「秘诀」:持续学习、知识迁移和自主参与

机器人落地「秘诀」:持续学习、知识迁移和自主参与

本文转自雷锋网,如需转载请至雷锋网官网申请授权。​2022年5月23日,一年一度的机器人技术领域的顶级国际会议ICRA2022(IEEEInternationalConferenceonRoboticsandAutomation)在美国费城如期举行。这是ICRA举办的第39个年头。ICRA是IEEE机器人和自动化学会的旗舰会议,也是机器人研究者展示和讨论他们工作的主要国际论坛。在今年的ICRA上,亚马逊的三位首席机器人专家,SiddSrinivasa、TyeBrady和

本文目录

    机器人落地「秘诀」:持续学习、知识迁移和自主参与

    本文转自雷锋网,如需转载请至雷锋网官网申请授权。

    ​2022年5月23日,一年一度的机器人技术领域的顶级国际会议 ICRA 2022 (IEEE International Conference on Robotics and Automation) 在美国费城如期举行。

    这是ICRA举办的第39个年头。ICRA 是 IEEE 机器人和自动化学会的旗舰会议,也是机器人研究者展示和讨论他们工作的主要国际论坛。

    在今年的ICRA上,亚马逊的三位首席机器人专家,Sidd Srinivasa、 Tye Brady 和 Philipp Michel 简单讨论了在现实世界中构建人机互动的机器人系统所面临的挑战。

    机器人落地「秘诀」:持续学习、知识迁移和自主参与

    图注:从左到右为亚马逊机器人人工智能主管 Sidd Srinivasa,亚马逊机器人公司(全球)首席技术专家 Tye Brady,以及亚马逊 Scout 应用科学高级经理 Philipp MichelSidd

    Srinivasa是全球知名的机器人专家,IEEE Fellow,现任华盛顿大学波音特聘教授,同时是 Amazon 机器人人工智能项目的负责人,负责管理协助 Amazon 物流中心员工的自主机器人的算法,研究可以收拾和包装产品的机器人和可自主搬卸和运输货物的推车式机器人。

    Tye Brady是亚马逊机器人公司(全球)首席技术专家,MIT航空航天工程硕士背景。而Philipp Michel与Sidd Srinivasa同为CMU机器人研究所的博士校友,是亚马逊Scout机器人项目的高级经理。

    在探讨解决机器人落地挑战的问题上,他们提出了自己的看法。AI科技评论作了不改原意的整理,如下:

    Q: 你们在机器人领域的研究分别解决不同的问题,这些问题之间有什么相同点?

    Sidd Srinivasa:机器人研究的一个重要难点是:我们生活在一个开放的世界中。我们甚至不知道即将面对的「输入」是什么。在我们的营运中心,我需要操控超过2000万件物品,而且这些物品还以每天成千上百件的数量在增加。大部分时候,我们的机器人并不清楚它们所拾起的物品是什么,但它们需要小心地拾起物品,并在不损坏物品的前提下将物品进行快速包装。

    Philipp Michel:对于Scout来说,难点是在人行道上遇到的物体,以及运送的环境。我们在美国四个州都部署了私人送货设备。天气状况、光照条件……我们从一开始就明确要处理大量的变量,使机器人能够适应复杂的环境。

    Tye Brady:在开发执行机器人的过程中,我们有一个显著的优势,就是在半结构化的环境中展开运营。我们可以自行制定机器人的交通规则,了解环境真的有助于我们的科学家和工程师深入理解我们要移动、操作、分类和识别的物体,完成订单。也就是说,我们可以在真实世界中实现对技术的追求。

    Philipp Michel :还有另一个共同点,就是我们非常依赖从数据中学习,以解决问题。Scout 会在执行任务的过程中接收真实世界的数据,然后不断迭代开发用于感知、定位和导航的机器学习解决方案。

    Sidd Srinivasa:我完全同意(从数据中学习解决问题)。我认为机器学习和自适应控制是超线性规模拓展的关键。如果我们部署了成千上万的机器人,我们不可能有成千上万的科学家和工程师来研究它们,我们需要依赖真实世界的数据,实现超线性地增长。

    另外,我认为开放的世界会迫使我们思考怎样「持续学习」。我们的机器学习模型往往是基于一些输入数据分布来训练的,但因为这是一个开放的世界,会遇到「协变量转移」(covariate shift)的问题,也就是看到的数据与分布不匹配,这会导致机器学习模型常常没来由地过于自信。

    因此,我们所做的大量工作就是创建一个「watchdogs」(看门狗,一种监督设备),用来识别输入数据分布何时偏离了它所受训的分布。然后,我们再进行「重要性抽样」(importance sampling),这样我们就可以挑选出已经改变的数据,重新训练机器学习模型。

    Philipp Michel:这也是为什么我们想要在不同的地方训练机器人的原因之一,这样我们就可以尽早知道机器人可能遇到的现实数据,反过来迫使我们开发能够解决新数据的方案。

    Sidd Srinivasa:这的确是个好主意。拥有多机器人的优点之一就是系统能够识别出变化的内容,重新进行训练,然后将这些知识分享给其他机器人。

    想到一个分拣机器人的故事:在世界的某个角落,一个机器人遇到一个新的包装类型。一开始,它很困扰,因为它从来没有见过这种情况,也无法识别出来。后来出现了一个新的解决方案:这只机器人可以将新的包装类型传输给世界上所有机器人。如此一来,当这种新包装类型出现在其他地方,其余机器人就知晓如何处理了。相当于有了一个「备份」,新的数据出现在一个点,其他点都会知道,因为系统已经能够重新自我训练、并分享信息了。

    Philipp Michel:我们的机器人也在做类似的事情。如果我们的机器人遇到之前没有遇到过的新障碍,我们会尝试调整模型来识别与处理这些障碍,随后将新的模型部署到所有的机器人上。

    让我夜不能寐的一件事情是,我们的机器人会在人行道上遇到新的物体,但这些物体在接下来的三年都不会再遇到,例如:人们在万圣节上用来装饰草坪的滴水兽,或者人们在野餐的桌子上放一把伞、使桌子看起来不像「野餐桌」。对于这种情况,所有的机器学习算法都无法识别出这是一张野餐桌。

    因此,我们的部分研究还是关于如何平衡无需纠结的普通事物与具体类别的事物。如果这是一个敞开的井盖口,那么机器人一定要善于识别,不然它会掉下去。但如果它只是一个随机的盒子,我们可能就不需要知道这个盒子的层次结构,只需要知道这是我们要绕过去的物体即可。

    Sidd Srinivasa:另一个挑战是,当你改变你的模型时,可能会出现意想不到的后果。改变后的模型也许不会影响机器人的感知,但可能会改变机器人「刹车」方式,导致两个月后滚珠轴承磨损。在端到端的系统中,未来许多有趣的研究都是关于“理解系统部分更改对整个系统性能的影响”。

    Philipp Michel:我们花了很多时间思考是否应该划分机器人堆栈的不同部分。在他们之间做整合能够带来很多好处,但也是有限的。一个极端情况是摄像头到电机到扭矩的学习,这在任何现实世界的机器人应用中都是非常具有挑战性的。还有就是传统的机器人堆栈,它被很好地分成了定位、感知、规划和控制等部分。

    我们还花了很多时间思考堆栈应该如何随着时间的推移而发展,把这些部分更紧密地结合在一起时性能有什么提升?同时,我们希望有一个系统尽可能地保持可解释性。我们试图最大化利用整个堆栈的学习组件集成,同时保留可解释性和安全功能的数量。

    Sidd Srinivasa:这个观点很赞,我完全同意 Philipp 的观点,用一个模型来统治所有模型未必是正确的。但通常,我们最终建立的机器学习模型共享一个主干,有多个应用的头。一个物体是什么,分割一个物体意味着什么?可能类似于挑选、堆放或者包装,但是每一个都需要专门的头,搭载在专门任务的主干上。

    Philipp Michel:我们考虑的一些因素是电池、行程、温度、空间和计算限制。因此,我们需要高效使用我们的模型、优化模型、并尝试尽可能多地利用共享主干,就像 Sidd 提到的,不同的头用于不同的任务。

    机器人落地「秘诀」:持续学习、知识迁移和自主参与

    图注:Amazon Scout 是一个自动送货机器人,它可以在公共人行道上以步行的速度移动,目前正在美国四个州进行实地测试。

    Q:当我问及你们项目之间的共性时,我想到的一件事是你们的机器人都是和人类在同样的环境中工作。为什么这会使问题复杂化呢?

    Sidd Srinivasa:机器人正在走近人类生活,我们必须尊重发生在人类世界中的所有复杂的互动。除了走路、开车、执行任务外,还有复杂的社交。对机器人来说重要的是,首先,要有意识;其次,要参与其中。

    这真的很难,当你在开车的时候,有时很难判断其他人在想什么,也很难根据他们的想法来决定如何行动。仅仅是推理问题就很难,然后闭环就更难了。

    如果机器人正在下棋或与人对弈,那么预测他们将要做什么就容易多了,因为规则已经很好地制定了。如果你假设你的对手是最优的,那么你会做得很好,即使他们是次优的。这在某些双人游戏中是种保证。

    但实际情况并非如此,我们在玩这种确保双赢的合作博弈发现,博弈时其实很难准确预测,即便合作者也是好意。

    Philipp Michel:而且人类世界的行为变化很大。有的宠物完全无视机器人,有的宠物会走向机器人。行人也是如此,有些人对机器人视而不见,而有些人则径直走近它。特别是孩子,他们的好奇心超强,互动非常密切,我们需要能够安全地处理所有相处场景,这些可变性让人跃跃欲试。​

    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
    作者最新文章
    业界资讯 亚马逊 机器人
    相关文章 更多
    精品专题 更多
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    PDF教程

    正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

    macOS软件

    正软商城macOS软件专区,精选适用于Mac电脑的办公、设计、影音、效率、开发和系统工具,提供软件功能介绍、macOS兼容版本、正版授权及购买下载服务。

    IOS软件

    正软商城iOS软件专区,精选适用于iPhone和iPad的办公、学习、影音、设计、效率及AI应用,提供功能介绍、适用设备、系统要求和正版获取方式等信息。

    AI

    正软商城AI软件专区,汇集AI写作、AI绘画、AI视频、AI办公、AI编程、AI翻译、智能客服和数据分析等人工智能工具,提供功能介绍、适用平台、收费方式及正版购买信息。

    Mac软件 更多
    讯飞智作 网页版
    讯飞智作 网页版

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    Aperty macOS版
    Aperty macOS版

    Aperty 是 Skylum 推出的 AI 人像修图软件,支持自然肤质修饰、瑕疵处理、面部与身体调整、预设及批量同步。

    立刻MV 网页版
    立刻MV 网页版

    立刻MV 面向音乐人、内容创作者和品牌团队,帮助用户低成本完成歌曲 MV、歌词视频、AI 分镜、图生视频与最终合成。

    蛙蛙写作 网页版
    蛙蛙写作 网页版

    蛙蛙写作 AI 创作工具,覆盖小说、剧本、文案,一键生成文稿,打通文字转视频全流程,高效解决创作难题。

    超级简历WonderCV 网页版
    超级简历WonderCV 网页版

    超级简历WonderCV是面向应届生和AI小白的智能求职平台,覆盖简历、面试与职业规划。

    音述AI 网页版
    音述AI 网页版

    音述AI,是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区。

    AionClaw macOS版
    AionClaw macOS版

    AionClaw 是可在桌面端运行的任务型 AI 助手,通过数字专家与技能市场组合办公、创作、数据和开发能力。

    Loomy macOS版
    Loomy macOS版

    Loomy 是科大讯飞推出的桌面 AI 助手,可通过对话、任务与工作目录协助处理办公、内容创作和资料整理。

    AirBuddy 3 macOS版
    AirBuddy 3 macOS版

    AirBuddy 3 是面向 macOS 的蓝牙外设增强工具,可集中查看 AirPods、Beats 与苹果设备电量,提供快速连接、播放控制、电量提醒、桌面小组件和多台 Mac 外设接力等功能。

    AirServer macOS版
    AirServer macOS版

    AirServer macOS版可把 Mac 转换为无线投屏接收端,通过 AirPlay 或 Google Cast 接收手机、平板和电脑画面,并支持多设备同时连接、高清镜像及会话录制,适合家庭娱乐、课堂教学、会议演示和应用展示。

    AnyDesk macOS版
    AnyDesk macOS版

    AnyDesk macOS版是一款适用于远程办公、设备维护和客户支持的远程桌面工具,可连接并操作异地计算机,支持文件传输、无人值守访问、会话权限控制及跨平台协作。

    WINDOWS 更多
    讯飞智作 网页版
    讯飞智作 网页版

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    PixTV 网页版
    PixTV 网页版

    PixTV 是一款在浏览器中使用的 AI 视觉内容创作平台,提供图片、视频、音频、文字生成、AI 分镜、局部重绘、提示词反推和无限画布等工具,适合短剧、漫剧、广告及社交媒体内容制作。

    讯飞绘文 网页版
    讯飞绘文 网页版

    讯飞绘文网页版是科大讯飞推出的AI图文创作与内容运营工具,覆盖热点选题、文章生成、稿件校对、智能配图、排版发布和数据复盘等环节,适合自媒体创作者及内容团队在线使用。

    Maya(Autodesk Maya) Windows版
    Maya(Autodesk Maya) Windows版

    Autodesk Maya 是面向影视、电视、动画和游戏行业的专业三维制作软件,集多边形与 NURBS 建模、角色绑定、关键帧和动作捕捉动画、Bifrost 特效模拟、材质开发及 Arnold 渲染于一体,

    Aperty Windows版
    Aperty Windows版

    Aperty 是 Skylum 推出的 AI 人像修图软件,支持自然肤质修饰、瑕疵处理、面部与身体调整、预设及批量同步。

    立刻MV 网页版
    立刻MV 网页版

    立刻MV 面向音乐人、内容创作者和品牌团队,帮助用户低成本完成歌曲 MV、歌词视频、AI 分镜、图生视频与最终合成。

    蛙蛙写作 网页版
    蛙蛙写作 网页版

    蛙蛙写作 AI 创作工具,覆盖小说、剧本、文案,一键生成文稿,打通文字转视频全流程,高效解决创作难题。

    超级简历WonderCV 网页版
    超级简历WonderCV 网页版

    超级简历WonderCV是面向应届生和AI小白的智能求职平台,覆盖简历、面试与职业规划。

    音述AI 网页版
    音述AI 网页版

    音述AI,是一个以“用声音述说故事”为核心的 AI 音乐创作与声音分享社区。

    AionClaw Windows版
    AionClaw Windows版

    AionClaw 是可在桌面端运行的任务型 AI 助手,通过数字专家与技能市场组合办公、创作、数据和开发能力。

    Loomy Windows版
    Loomy Windows版

    Loomy 是科大讯飞推出的桌面 AI 助手,可通过对话、任务与工作目录协助处理办公、内容创作和资料整理。