谷歌大脑提出TCN,能让机器人边看视频边模仿
在Time-Contrastive Networks: Self-Supervised Learning from Multi-View Observation这篇论文中,谷歌的研究者提出了一种从观察中学习世界的新方法,并多角度展示了机器人仅仅通过观看视频,就能在无人监督的情况下,模拟视频动作的全过程。
除了视频演示之外,谷歌大脑并未对机器人系统提供监督学习。他们将这种方法运用于各种不同的任务,以此来训练真实和虚拟机器人。例如,倒水任务,放碟任务,和姿势模仿任务。
第一步
通过视频的分解镜头来学习,将时间作为监督信号,发现视频的不同属性。这组嵌入向量经由一组非结构化和未标记的视频训练,里面含有和任务相关的有效动作,也有一些随机行为,来体现真实世界中的各种可能状态。
模型使用triplet loss误差函数,基于同一帧的多视角观察数据来训练多视角下同时出现的帧,在嵌入空间中互相关联。当然也可以考虑一个时间对比模型,只根据单一视角来训练。这一次,有效帧在锚点的一定范围内随机选定,根据有效范围计算边际范围。无效范围是在边际范围外随机选定。模型和之前一样进行训练。
第二步
通过强化学习来学习规则。基于TCN嵌入,根据第三方的真人示范来构造奖励函数。机械臂起初尝试一些随机动作,然后学会反复进行这些动作,就可以产生最高奖励的控制步骤,最后达成重现视频任务的效果。
模型在仅仅经历了9次迭代后就成功收敛,大约相当于现实世界15分钟的训练。同样地,在移碟任务中,机器人最初尝试随机运动,然后学会成功拿起和移动一个盘子。
好的文章,需要您的鼓励
15
- 最新资讯
- 最新问答
-
【海康机器人】出海 | 深化海外布局,以中国智造赋能全球制造升级
关键字: 海康机器人 出海 2024-09-29 -
携手致远智启新程│雄克中国新工厂开业典礼圆满举行
关键字: 雄克 新工厂 2024-09-29 -
automatica 2025新闻发布会暨自动化机器人行业“走出去"交流论坛圆满成功!
关键字: automatica 自动化机器人 行业论坛 2024-09-27 -
走进工厂 | 总投入超10亿,自主化程度超90%,配天机器人诠释国产替代硬实力
关键字: 配天 机器人 走进工厂 2024-09-23 -
倒计时4天!这份工博会逛展攻略,一定要收藏!
关键字: 工博会 逛展攻略 2024-09-20
-
amr机器人是什么意思
标签: amr机器人,什么意思 提问:HYN 2024-09-18 11:16:05 -
上海视觉设备厂家有哪些?
标签: 视觉设备,视觉设备厂家 提问:GIGI 2024-09-13 10:16:02 -
搬运机器人多少钱一台?
标签: 搬运机器人,多少钱 提问:小仙 2024-09-10 11:28:02 -
配天机器人价格怎么样?
标签: 配天,机器人,价格 提问:SOSO 2024-09-09 10:48:02 -
场景感知技术包括哪些
标签: 场景感知,技术 提问:YUMI 2024-09-03 10:30:05
- 2016-08-12 05:07:36
- 2016-08-17 01:22:54
- 2018-01-22 13:33:14
- 2018-04-04 15:23:23
- 2017-06-13 02:31:32
- 2019-03-25 10:02:33
- 2022-08-24 12:09:31
- 2018-07-18 16:14:08
- 2022-08-30 15:17:40
- 2022-08-24 14:16:37
- 2022-09-13 12:17:35
- 2023-09-01 10:16:04
- 2024-09-29
- 2024-09-29
- 2024-09-27
- 2024-09-23
- 2024-09-20
- 2024-09-13
- 2024-09-09
- 2024-09-11
- 2024-09-09
- 2024-09-09