发布时间:2023-09-20
点击次数: 跑酷是一项极限运动,对机器人特别是四足机器狗来说,更是一项巨大的挑战,需要在复杂的环境中快速克服各种障碍。一些研究尝试使用参考动物数据或复杂的奖励,但这些方法生成的「跑酷」技能要么多样但盲目,要么基于视觉但特定于场景。然而,自主跑酷需要机器人学习基于视觉且多样化的通用技能,以感知各种场景并迅速做出反应。
最近,一个机器狗跑酷的视频火了,视频中的机器狗在多种场景中迅速克服了各种障碍。例如,从铁板下方的缝隙穿过,爬上木箱,再跳到另一个木箱上,一连串动作行云流水:
☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

这串动作说明机器狗已经掌握了贴地爬行、攀爬和跳跃三个基本技能



它还有一个特殊的技能:能够倾斜挤过狭窄的缝隙

如果机器狗未能克服障碍,它会多试几次:

该内容已经被重写成中文: 这款机器狗是基于一种为低成本机器人研发的「跑酷」技能学习框架。该框架由上海期智研究院、斯坦福大学、上海科技大学、CMU和清华大学的研究者联合提出,并且其研究论文已入选CoRL 2025(Oral)。该研究项目已经开源

论文地址:https://arxiv.org/abs/2309.05665
项目地址:https://github.com/ZiwenZhuang/parkour
Narration Box
Narration Box是一种语音生成服务,用户可以创建画外音、旁白、有声读物、音频页面、播客等
68
查看详情
该研究推出了一种新的开源系统,用于学习基于视觉的端到端跑酷策略,以使用简单的奖励来学习多种跑酷技能,而无需任何参考运动数据。
具体来说,这项研究提出了一种强化学习方法,旨在让机器人学会攀爬高障碍、跳过大间隙、在低障碍下爬行、挤过狭小缝隙和跑步等技能,并将这些技能转化为基于单一视觉的跑酷策略。同时,通过使用以自我为中心的深度相机,将这些技能迁移到四足机器人上
为了在低成本机器人上成功部署该研究提出的跑酷策略,只需使用机载计算(Nvidia Jetson)、机载深度摄像头(Intel Realsense)和机载电源,而不需要动作捕捉、激光雷达、多个深度摄像头和大量计算
为了训练跑酷策略,该研究共进行了如下三个阶段的工作:
第一阶段:强化学习预训练,具备软动态约束。该研究采用自动课程让机器人学习穿越障碍物,鼓励机器人逐渐学会克服障碍
第二阶段:具有 hard 动态约束的强化学习微调。该研究在这个阶段强制执行所有动态约束,并用现实动态(realistic dynamics)微调机器人在预训练阶段学到的行为。

第三阶段:蒸馏。在学习了每个单独的跑酷技能后,该研究使用 DAgger 将它们蒸馏成一个基于视觉的跑酷策略(由 RNN 参数化),该
策略可以仅使用机载感知和计算部署到腿式机器人上。

在训练中,该研究为每种技能设置了相应的障碍物尺寸,如下表 1 所示:

该研究进行了大量的模拟和现实实验,结果表明,跑酷策略使低成本四足机器人能够自主选择和执行适当的跑酷技能,仅使用机载计算、机载视觉传感和机载电源即可穿越开放世界中具有挑战性的环境,包括爬高 0.40m(1.53x 机器人高度)的障碍物,跳过 0.60m(1.5x 机器人长度)的大间隙,在 0.2m(0.76x 机器人高度)的低障碍物下爬行,通过倾斜挤过 0.28m 的细缝(小于机器人宽度),并且可以一直跑步前行。


此外,研究还对所提出的方法与几种基线方法进行了比较,并在模拟环境中进行了消融实验。具体结果如表2所示:

如有兴趣的读者可阅读原始论文,以深入了解更多研究内容
以上就是攀爬、跳跃、过窄缝,开源强化学习策略让机器狗能跑酷了的详细内容,更多请关注其它相关文章!
# AI
# 各大网站推广费用高
# 抖音营销小吃店怎么做推广
# 福州晋安seo费用
# 武穴营销型网站建设
# 许昌营销网站推广软件
# 梁山品牌营销推广招聘信息
# 新乡网站推广托管
# 斯坦福大学
# 挤过
# 所示
# 细缝
# 丰田
# 低成本
# 中国科学院
# 进行了
# 上海
# 开源
# 模型
# 团林seo报价
# 手工制品的营销推广
# 甘肃网站建设网站设计
相关栏目:
【
行业新闻62819 】
【
科技资讯67470 】
相关推荐:
五项人工智能尚未能够实现的任务
B站内测 AI 搜索功能,输入“?”即可体验
软通动力天枢元宇宙研究院签约落户江宁高新区
首届亚太网络法实务大会召开 九位大咖探讨元宇宙与人工智能发展
软银、淡马锡、沙特阿美突击入股,“协作机器人第一股”节卡股份:强敌环伺,持续失血是常态
跑不动的元宇宙,虚拟世界比现实更冷酷
精准度可提高 20%:英国九家银行签约使用基于 AI 的“消费者欺诈风险系统”应对*
华为发布两款AI存储新品
厂商陆续公布AI进展 完美世界游戏展示复合应用AI in GamePlay
周星驰支持的人工智能与 Web3 初创公司 Moonbox 完成 100 万美元融资
创新全场景清洁方案!海尔商用机器人首发上市
人工智能如何与智能家居集成
本届人工智能大会上的这个“镇馆之宝”,来自长宁企业西井科技!
深圳人工智能企业超1900家
马斯克预测:特斯拉全自动驾驶将在今年实现 对AI深度变化感到担忧
AI浪潮席卷,时空壶为何能成为AI翻译时代的破局者
WHEE功能介绍
图像生成过程中遭「截胡」:稳定扩散的失败案例受四大因素影响
湖北科技职业学院举行工业机器人及智能制造技术专精特新产业学院建设启动仪式
构建AI绘画网站的方法:使用API接口和调用步骤
智能电网技术:提高能源效率和可靠性
联通发布鸿湖图文AI大模型1.0,可实现以文生图
昇腾AI大模型训推一体化解决方案将在WAIC发布
RoboNeo什么时候上线
爱设计 AI 一键生成 PPT 工具上线:输入标题即可生成 PPT
微软AR/VR专利提出使用时间复用谐振驱动产生双极性电源
吉林首例!机器人辅助下搭桥手术成功实施
小艺将具备大模型能力,鸿蒙4加速AI普及之路
猿辅导推出Motiff,整合三大AI功能,助力UI设计生产力革新
微软为 AI 初学者推出免费网课:为期 12 周,共 24 节课
《自然》杂志拒绝刊登人工智能生成的图片和视频
0代码微调大模型火了,只需5步,成本低至150块
微软商店 AI 摘要功能开启预览,帮助用户迅速了解应用评价
Vision Pro 太贵,苹果基于 iPhone 的 VR 头显专利曝光
微软 Azure AI 文本转语音服务升级:新增男性声音和扩展语言支持
人工智能进入绿植界,智能庭院市场初具规模
全新升级的广州麦当劳:面积最大餐厅正式引入智慧机器人
成都大运会闭幕式引入人形机器人展示表演
浪潮KaiwuDB:“快人一步” - 打造更懂物联网的数据库
全媒封面丨⑤商汤科技:原创AI算法“发电厂”
如何提高集群协作效率?中外团队合作研发基于均值偏移的机器人队形控制策略
重磅! 捷通华声灵云AICC荣获第二届光合组织AI解决方案大赛二等奖
“踩油门,也要会踩刹车” 互联网企业高管谈人工智能发展
马斯克回应“人工智能让一切变得更好”:我们已经是半机器人了
国内首家,360智脑通过中国信通院可信AIGC大语言模型功能评估
AI大模型,将为智慧城市带来哪些新变化?
盘古大模型3.0正式发布 AI开发正走向新“工业化开发模式”
AIGC浪潮下,联想集团再加码计算与人工智能
再度重仓 AI 赛道,SaaS 巨头 Salesforce 扩大 AIGC 风投基金规模
谷歌借AI打破十年排序算法封印,每天被执行数万亿次,网友却说是最不切实际的研究?