DeepMind提出基于视觉的强化学习模型,十八般兵器对机器人不在话下
人类是擅于模仿的,我们和其他动物通过观察行为来模仿,理解它对环境状态的感知影响,并找出我们的身体可以采取什么行动来达到类似的结果。 对于机器人De学习任务来说,模仿学习是一个强大的工具。但在这类环境感知任务中,使用强化学习来指定一个回报函数却是很困难的。 DeepMind最新论文主要探索了ep仅从第三人称视觉模仿操作轨迹的可能性,而不依赖action状态,团队的灵感来自于一个机器人机械手模仿视觉上演示的复杂的行为。 DeepMind提出Mi的方法主要分为两个阶段: 1、提出一种操作器无关的表示(MIR, Manipulation-Independent Representations),即不nd管是机械手、人手或是其他设备,保证这种表示都能够用于后续任务的学习 2、使用强化学习来学习action策略 与操作器无关的表示 领域适应性问题是机器提出人模拟现实中最关键的问题,即解决视觉仿真和现实之间的差别。 1、 随机使用各种类型操作器,各种仿真环境用来模拟现实世界 2、加入去除操作臂后的观察 3基于、时序平滑对抗网络(TSCN, Temporally-Smooth Contrastive Networks),相比TCN来说,在softmax交叉视觉熵目标函数中增加了一个分布系数p,使得学习过程更加平滑,尤其是在cross-domain的情况。 使用强化学习 MIR表示空间的需求是actiona的强ble的,即可用于强化学习,表示为具体的action。 一个解决方案是使用goal-conditioned来训练策略,输入为当前状态o和目标状态g。这篇化学文章提出一种扩展方式,cross-domain goal-conditional policies,输入当前状态o和跨域的目标状态o',最小化到习模达目标的行动次数。 数据和实验 研究小组在8个环境和场景(规范模拟、隐形手臂、随机手臂、随机域、Jaco Hand、真机器人、手杖和人手)上进行了实型,验,以评估通过未知机械手模拟无约束操作轨迹的性能。 他们还用了一些基线方法,如朴素的goal conditioned plicies (GCP)和t十八emporal distance。 MIR 在所有测试领域都取得了最好的性能。它在叠加成功率方面的表现显著提高,并且以100% 的分数很好地模仿了模拟的 Ja般兵co Hand 和 Invisible Arm。 这项研究论证了视觉模仿表征在视觉模仿中的重要性,并验证了操作无关表征在视觉模仿中的成功应用。 未来工厂中的器对机器人将拥有更强大的学习能力,并不局限于一种特定工具,一种特定任务。
- 最近发表
-
- 全球首发!Mureka V7.5 AI 音乐单曲《Digital Heartbeat》震撼上线
- 使用云计算使小型企业受益的5种方法
- 图样图森破-Pyecharts复合图
- 半数英国成年人担忧 AI 对就业的影响,工会呼吁更大参与
- 标签: TCL 李东生 光伏产业 半导体显示
- 云安全日报201204:Apache Tomcat应用服务器发现信息泄露漏洞,需要尽快升级
- 大模型AI扫地机器人 “翻车”:成功率仅 40%!家庭应用仍有待提高
- Pinterest 推出 AI 购物助手,助你挑选时尚穿搭
- 标签: 长安启源A07 济广高速10·2事故 IACC辅助驾驶 L2级自动驾驶
- 标签: Gemini 谷歌 OpenAI
- 随机阅读
-
- 居家办公带来的好处:谷歌一年节省10亿美元支出
- 标签: 阅文 天方金码 摘星漫剧场 风月傀儡
- AI与人:人工智能不断优化,而人类不断进化
- 标签: 滴滴 滴滴国际 99平台 巴西外卖
- AI 记者或是“傀儡”?OpenAI 关联组织疑资助虚假新闻网站
- 标签: 宋洋 Meta TikTok 快手
- Infosys 推出 Topaz Fabric:打造企业 IT 运营的智能化新平台
- IBM收购云解决方案供应商Expertus 扩展混合云数字支付解决方案
- 标签: 维智捷 祁松 线束 电气架构
- 谷歌发布第八代TPU与Gemini企业代理平台,重新定义“代理企业”基础设施
- 标签: 去哪儿旅行 中东局势 伊朗爆炸 航班保障
- 标签: 贝索斯 普罗米修斯计划 AI初创公司 联合CEO
- 标签: 中国石油 中油电能 塔里木上库 国网新源
- 标签: 科兴制药 赛若金 依普定 GB08
- 软银以53.75亿美元收购 ABB 集团机器人业务,布局物理人工智能
- 百度小度 AI 眼镜将于百度世界2025大会正式发布,年内开售
- 在嘴巴里放入124 个传感器,谷歌眼镜创始人新项目:用舌头发信息
- 标签: 腾讯元宝 Logo更新 AI助手 拟人化设计
- 大数据会不会绑架民众?
- 标签: 零跑汽车 朱江明 廉洁合规 反腐举报
- 搜索
-
- 友情链接