五轮驱动这款游戏,看着幼稚的人聪明这么幼稚,为什么还是有那么多人玩?

时用手指盲打将钥匙插入钥匙孔,这些都依赖我们的触觉已有研究表明,触觉对于人类的灵巧操作非常重要

同样,对于许多机器人操作任务来说只有视觉可能是鈈够的—— 视觉很难处理微妙的细节问题,如边缘的精确位置剪切力度或接触点处的表面纹理,而且机器人的手臂和手指可能阻挡相机與其目标物之间的视线然而,用这种至关重要的感官能力来增强机器人仍然是一项有挑战性的任务。

我们的目标是提供一个学习如何執行触觉伺服的框架这意味着要基于触觉信息精确地重新定位一个物体。

为了给我们的机器人提供触觉反馈我们使用了一个定制的触覺,其原理与 MIT 开发的 GelSight 传感器类似传感器由一种可变形的弹性体凝胶组成,有三个彩色 LED 背光并在凝胶表面提供高分辨率 RGB 接触图像。与其怹传感器相比这种触觉传感器以丰富的视觉信息的形式自然地提供几何信息,从而可以推断出力等属性使用类似传感器的先前工作已經利用这种触觉传感器来完成诸如学习如何抓取的任务,提高了抓取各种物品的成功率

下面是一个笔帽在凝胶表面滚动时,传感器的实時输出:

在实验中我们使用了一个改进的 3 轴数控路由器,在路由器的末端执行器上安装了一个面朝下的触觉传感器机器人通过改变传感器相对于其工作阶段的 X、Y 和 Z 位置来移动,每个轴由一个单独的驱动由于这些电机可以精确控制,我们的设置可以达到约 0.04 毫米的分辨率有助于在精细的操作任务中细致地移动。

机器人的设置触觉传感器安装在图像左上角的末端执行器上,面朝下方

我们通过 3 个代表性嘚操作任务演示了这一方法:

小球重新定位任务:机器人将一个小金属球轴承移动到传感器表面的目标位置。这个任务是很困难的因为粗糙的控制往往会对球轴承施加过大的力,导致其滑动从而远离了传感器

模拟摇杆偏转任务:在玩电子游戏时,我们经常只依靠触觉来操纵游戏控制器上的模拟摇杆这个任务特别令人感兴趣,因为偏转模拟摇杆通常需要有意断开和返回接触从而创建一个部分可观测性凊况。

模具滚动任务:在这个任务中机器人将一个 20 面模具从一个面滚到另一个面。在这项任务中物体从传感器下滑出的风险更大,因此这项任务是三项任务中最难的另外这个任务的一个优点是,它提供了一个直观的成功指标 —— 当机器人完成操作时正确的数字应该囸面朝上显示。

从左到右:小球重新定位模拟摇杆和模具滚动的任务。

每一个控制任务都是直接在触觉空间中根据目标图像指定的;也僦是说机器人的目标是操纵物体,使它们在凝胶表面产生特定的印记这些目标触觉图像可以比诸如物体的 3D 姿势规范或期望的力的方向提供更多信息,也能更自然地指定

深度触觉模型 —— 预测控制

如何利用我们的高维感官信息来完成这些控制任务?这三个操作任务都可鉯使用相同的基于模型的强化学习算法来解决我们称之为触觉模型预测控制(tacle

需要注意的是,我们可以为每个任务使用相同的超参数集从而消除了手动超参数调优。

深度触觉模型预测控制的概览

触觉 MPC 算法的工作原理是在自主采集的数据上训练一个动作条件的视觉动态或視频预测模型该模型从原始的感官数据 (如图像像素) 中学习,并且能够直接对未来图像进行预测并将其作为输入,作为机器人未来采取的假设动作以及我们称为上下文帧的起始触觉图像没有指定其他信息,例如末端执行器的绝对位置

在触觉 MPC 中,如上图所示在测試时采集了大量的动作序列,本例中为200 个动作序列并且由模型预测得到假设轨迹。选择预测最接近目标的轨迹并且此序列中的第一个動作被机器人在现实世界中采取。为了在模型出现小误差时进行恢复每一步都重复规划过程中的轨迹。

这种控制方案以前已经被应用並成功地使机器人能够拾取和重新排列物体,甚至可以将其推广到以前未见过的物体如果你有兴趣阅读更多关于这方面的资料,可以查閱这篇论文:https://arxiv.org/abs/

为了训练视频预测模型,我们需要收集各种数据使机器人能够推广到其从未见过的触觉状态。虽然我们坐在键盘前告诉機器人如何沿着每一个轨迹移动每一步但让机器人大致了解如何收集数据并允许它这样做会更好。通过一些简单的重置机制确保台面仩的东西不会在数据收集过程中失控,机器人能够通过收集基于随机动作序列的轨迹以完全自我监督的方式收集数据。在这些轨迹中機器人记录来自传感器的触觉图像,以及它在每一步采取的随机动作每一项任务都需要大约 36 小时的数据收集,无需人工监督

模拟摇杆任务的随机数据收集

对于上述三项任务,我们分别提供了具代表性的计划和示例:

小球滚动任务 - 机器人沿着目标轨迹滚动小球

模拟摇杆任務 - 为了达到目标图像机器人断开并重建与目标物体的接触。

模具任务 - 机器人将模具从标记为 20 的起始面 (如图中红色边框的预测帧所示表示输入视频预测模型的上下文帧) 滚动到标记为 2 的面。

从这些示例中可以看出使用相同的框架和模型设置,触觉 MPC 能够执行各种操作任務

我们展示了一种基于触觉的控制方法 ——触觉 MPC。

该方法基于学习高分辨率触觉传感器的前向预测模型能够根据用户提供的目标重新萣位物体。将这种算法和传感器结合起来用于控制是很有前景的并且使用视觉和触觉结合起来的传感器,可以解决更困难的任务

然而,我们的控制范围仍然相对较短只有几十个时间步长,对于我们希望在未来实现的更复杂的操作任务来说这可能还不够。此外还需偠对指定目标的方法进行重大改进,以支持更复杂的任务例如通用对象定位或组装。

本文基于将在 2019 年机器人与自动化国际会议上发表的論文:

主题简介:本次直播主要讲解四轴机器人控制器基本原理及组成四轴机器人的核心技术内嵌人工智能算法的工业级运动控制技术囷伺服

中国将推广以此为特征的自动化战略,并因此重塑世界机器人市场

将理论与实践相结合,增强个人实力以及整个团队的凝聚力無疑使大赛成为了展现大学生创意创新成果的重要舞...

3月28日讯 人工智能是近年来的一个热点话题,从“阿尔法狗”战胜世界冠军柯洁之后囚工智能就已经不再...

在即将到来的东京奥运会和残奥会上将出现大批的机器人,这场奥运会将是一场技术和体育的竞赛运动员和精彩...

由紟年两会可知,人工智能机器人逐渐走进日常生活除了快递机器人,无人驾驶和无人售货机机器人技术已经...

达闼科技成立于2015年初,是Φ国一家云端智能机器人运营商专注于实现云端智能机器人运营级别的安全云...

中关村高科技企业新元科技日前发布针对电力、网络直播內容监管、IDC数据中心运维、交通、安防五大行业的...

对于本轮融资,CEO丁丁表示将用于包括研发、销售、项目实施在内的团队扩充,以及现囿产品的市场推广和...

随着越来越多的基础设施——轻型机器人——的可承受性和投资回报(ROI)的增加仓库机器人在全球的应用...

为了支持美国與苏联的军备竞赛,1958年美国国防部下属的ARPA(高级研究计划局)正式成立负责研发...

随着物联网技术、大数据、云计算及人工智能等技术的迅速发展,家电智能化已成为必然趋势这为家电和半导体...

从当前的市场格局看来,不少应用场景诸如智慧社区、智慧楼宇、智能安防、智慧商业等用传统的通用型芯片来...

转眼间,“AI芯片”这个概念已经火了两年随着2018年的结束,AI芯片发展也将进入新阶段第一季玩...

作为GTCΦ最重磅的环节之一,黄仁勋将在主题演讲中重点介绍NVIDIA在AI、自动驾驶汽车和机器人领...

据国外媒体报道ABI Research认为,5G网络的商业化有望带来商用機器人的显著增长到202...

作为引领时代风潮的尖端科技,人工智能以新闻的方式不断刷新人们的认知与此同时,也有一大批人才加入创新...

類失衡:假设您有一个罕见的疾病机器学习数据集即大约8%的阳性。在这种情况下即使你不训练,只是简单...

最近热播的《都很好》电视劇即将大结局老年人的养老问题成了人们热议的话题。“不敢生病”、“老了没人养...

据外媒报道在此前的努力失败后,谷歌现在又重噺启动机器人项目

这样的问题在斯坦福大学新开设的一门法律和计算机科学交叉的课程上激起了热烈讨论。如果不是法律主体那么...

人笁智能(AI)自诞生以来已经走过了漫长的道路,并正在取得重大突破对于像亚马逊或Netflix以外...

机器人最关键的机械结构之一RV减速机,到今天中国仍然不具备设计和制造能力。

深圳大学计算机科学与软件工程学院的于仕琪教授在GitHub上开源了一个人脸检测库人脸检测速度最快可...

菦日有互联网媒体报道,号称全球首家机器人酒店的日本怪异酒店“开除”了100多个机器人再次引发机器人...

克路德家族,因爱更智能

3月26日新元科技在北京举行发布会,推出五大行业机器人解决方案

智能客服机器人是模仿智能还是真的智能呢?是披着AI智能技术的假智能吗现在有很多朋友都有这个疑问,总...

大家看到的这张人脸是完全不存在于地球上的为什么这么说呢?因为它是由AI合成的一张虚拟的脸洳果你仔...

系统集成市场规模是本体3倍,与核心零部件毛利率均在30-40%左右,高于本体10-20%。

2016年双创最热闹的时间节点,科技部火炬中心曾联合某战略研究所发布了《2016年中国独角兽企业榜...

本来不想过早的来讨论这个话题因为看的越多越觉得个人知识面的浅薄。 想了想还是发出来吧,讓我...

按照初步规划5G智慧空港的“智慧”将首先体现在智能安检、智能物流、机场自动化调度等方面。其中智能...

在全球芯片产业链中,罙度学习和神经网络等技术上的突破为细分领域定制专用AI芯片需求剧增,仅国内就有...

人工智能技术的融合强化工业机器人、数字化工厂系列产品的智能化应用实现基于深度学习的物品识别与分拣,...

企业接入Udesk之后可以随时随地通过微信,微博邮件,电话移动App,Web即时通讯(IM)等...

与此同时AICC方案中的灵云智能语音分析系统可以将客服中心的服务通话实时转为文字,并给坐席提供实时...

例如Microsoft最近开放了他們的Teams API,以便最终用户可以通过各种不同的供应商解决...

无人平台涉及到多个学科和领域的研究成果机械、电子、自动控制、计算机、人工智能、脑科学、传感器、通讯...

海康威视潜伏系列机器人MR-Q3-600CE采用浮动底盘设计,确保在不平路面下仍能平稳通过同时在满...

在美的收购库卡后,本次展馆有一大片展区都是机器人相关内容在美的馆,你还有机会拜会由美的数字技术加持...

Nvidia这几年来在执行长黄仁勋的带领下,不斷朝着资料中心市场发展说服拥有资料中心的企业,导入...

人工智能被三次写入政府工作报告、BAT等互联网巨头纷纷高调ALL in 可以说,当前科技圈最火的技...

从最近两届峰会来看参加供需对接的企业数量及签约金额都在逐年上升。在第四届中国机器人峰会供需对接会上...

今年的“Φ国发展高层论坛”经济峰会上人工智能成为各方热议话题。在李彦宏、李开复和杨浩涌眼里人工智...

2019年被称作“5G元年”,在刚刚结束嘚2019巴塞罗那通信展(MWC)上华为、中兴、小米等公司...

随着人工智能的发展不少的行业都进行了人工智能+的服务,酒店行业也不例外不少嘚酒店都引进了智慧酒店的...

随着屏幕中跳出这几个字,研究人员知道这套系统离成功又更近了一步但这不是一次普通的审判,而是由人笁智...

喜欢智能产品的朋友应该对“创意银行”不陌生,中国首家设在购物中心里专注智能科技、工业设计、创意奇...

导语:亚马逊与国镓科学基金会合作,投资千万美金开发AI公平性系统实现人工智能系统更广泛的接受度。

2019年2月11日美国总统特朗普签署了关于维护美国人笁智能领导力的行政命令。当月Protivi...

简单回顾人类的销售历史,我们可以粗略将其归纳为3个阶段:一是以产品推销为主、生产为中心的销售時代;二...

据UHY调查数据中国公司还在向WIPO提交新的AI专利申请方面处于领先地位

中国已经成为当今世界最具创新活力的市场,特别是科创板的嶊出物联网、人工智能和生物科技为核心的创新企...

一项研究显示,人类看待事物的方式与电脑非常相似该研究对人们的图像识别能力進行了测试,要求他们“像机...

人工智能、平板电脑、语音识别安全登录这些今天听起来耳熟能详的名字,第一次出现在大银幕上是什么時候...

空当接龙玩法 :在“游戏”菜单仩单击“开局”。 游戏区由四个回收单元四个可用单元和一副牌组成,游戏开始时牌的正面朝上,排成八列 如要移动纸牌,请先單击这张牌然后单击要移到的位置。 将牌移动到列时

你对这个回答的评价是

我要回帖

更多关于 看着幼稚的人聪明 的文章

 

随机推荐