收藏本站
收藏 | 投稿 | 论文排版

基于深度强化学习的双足机器人斜坡步态控制方法

吴晓光  刘绍维  杨磊  邓文强  贾哲恒  
【摘要】:为提高准被动双足机器人斜坡步行稳定性,本文提出了一种基于深度强化学习的准被动双足机器人步态控制方法.通过分析准被动双足机器人的混合动力学模型与稳定行走过程,建立了状态空间、动作空间、episode过程与奖励函数.在利用基于DDPG改进的Ape-X DPG算法持续学习后,准被动双足机器人能在较大斜坡范围内实现稳定行走.仿真实验表明, Ape-X DPG无论是学习能力还是收敛速度均优于基于PER的DDPG.同时,相较于能量成型控制,使用Ape-X DPG的准被动双足机器人步态收敛更迅速、步态收敛域更大,证明Ape-X DPG可有效提高准被动双足机器人的步行稳定性.

知网文化
【相似文献】
中国期刊全文数据库 前17条
1 陆万荣;许江淳;王志伟;任杰;;动态双足机器人建模及步态优化设计[J];自动化仪表;2019年11期
2 郭云开;谢宁;谢鹏程;谈小凤;;基于倒立摆模型的双足机器人步态系统研究[J];电子技术;2013年03期
3 刘宋;杨鑫;;平面双足机器人建模与仿真研究[J];计算机仿真;2020年08期
4 赵理想;宁祎;;仿生双足机器人步态规划研究现状及展望[J];机电信息;2016年27期
5 韩军;郑阳;;一种摆腰式无膝双足机器人的机构设计及运动分析[J];机械设计与制造;2020年05期
6 熊昕;;双足机器人 捕猎船[J];上海纺织科技;2020年07期
7 宋嘉琦;张奇志;周亚丽;;变长度弹性伸缩腿双足机器人动力学与控制[J];力学季刊;2019年02期
8 金伟超;;双足机器人小腿减震系统的设计与应用[J];淮海工学院学报(自然科学版);2019年03期
9 魏君;吴昕;;小型双足机器人平台[J];科学技术创新;2018年03期
10 乔书杰;刘玲玲;;被动动力式双足机器人仿生腿的设计与运动仿真研究[J];科技通报;2018年04期
11 路微;;阿凡达成真 韩国研发全球首个载人双足机器人[J];华东科技;2017年01期
12 谭鹤毅;;一种新的双足机器人模型设计与相关研究[J];计算机测量与控制;2017年02期
13 刘丹丹;张舰行;;双足机器人稳定性判据研究[J];通讯世界;2017年10期
14 王妍玮;李佳辉;蒋银红;马平;范骁;唐伟;;3D打印机器人设计[J];林业机械与木工设备;2017年10期
15 刘大龙;余有明;;仿生直立双足机器人的稳定性控制算法[J];机械与电子;2016年02期
16 支铁山;;基于3D打印技术的双足机器人创新实验平台[J];报刊荟萃;2017年06期
17 秦少东;张培媛;;双足机器人腿部的设计[J];电子世界;2014年10期
中国重要会议论文全文数据库 前20条
1 袁海辉;甘春标;杨世锡;;3D双足机器人行走的多域渐近稳定性控制[A];第十五届全国非线性振动暨第十二届全国非线性动力学和运动稳定性学术会议摘要集[C];2015年
2 张奇志;周亚丽;;伸缩腿双足机器人半被动行走控制研究[A];第十届全国多体动力学与控制暨第五届全国航天动力学与控制学术会议论文摘要集[C];2017年
3 丁长涛;杨世锡;甘春标;;多源随机不确定性驱动下双足机器人动力学响应分析[A];中国力学大会——2013论文摘要集[C];2013年
4 毛勇;王家廞;贾培发;柳宁;杨泽红;宋亦旭;;半被动双足机器人的机械参数优化设计[A];2007年中国智能自动化会议论文集[C];2007年
5 龚璐璐;张政海;李云鹏;韩文豪;姚劲东;徐钟舒;曾维康;刘栋;;基于遗传算法的双足机器人不同坡度下坡的步态优化[A];第十二届全国生物力学学术会议暨第十四届全国生物流变学学术会议会议论文摘要汇编[C];2018年
6 偶晓飞;;交叉足印双足机器人的设计与实现[A];2015全国嵌入式仪表及系统技术会议程序册[C];2015年
7 甘春标;;双足机器人驱动力矩对不确定参数的敏感性分析[A];第二届全国随机动力学学术会议摘要集与会议议程[C];2013年
8 汤超;王志良;郝文瑞;刘涛;赵积春;;十七自由度双足机器人的步行稳定性研究[A];全国炼钢连铸过程自动化技术交流会论文集[C];2006年
9 龚璐璐;曾维康;李剑锋;;力/位混合控制用于双足机器人不平整地面无碰撞行走的步态规划[A];第十二届全国分析力学学术会议摘要集[C];2016年
10 周彦俊;谈英姿;许映秋;;双足机器人全向快速行走研究[A];2009年中国智能自动化会议论文集(第二分册)[C];2009年
11 祁峰;柳宁;李俊峰;宝音贺西;;被动行走器高速行走的研究[A];第八届全国动力学与控制学术会议论文集[C];2008年
12 赵秋玲;周亚丽;张奇志;;双足机器人无源动态行走步态设计的粒子群优化算法[A];2007年中国智能自动化会议论文集[C];2007年
13 袁海辉;甘春标;杨世锡;;多域混杂欠驱动3D双足机器人的周期步态规划方法[A];第十届动力学与控制学术会议摘要集[C];2016年
14 张奇志;周亚丽;赵秋玲;戈新生;;双足机器人无源动态行走步态设计的粒子群优化算法[A];庆祝中国力学学会成立50周年暨中国力学学会学术大会’2007论文摘要集(下)[C];2007年
15 甘春标;丁长涛;杨世锡;;平面双足机器人轨迹规划中参数不确定性动力学模型研究[A];第九届全国动力学与控制学术会议会议手册[C];2012年
16 冯帅;刘凯;;被动行走中躯干对能量效率的影响[A];2013年中国智能自动化学术会议论文集(第三分册)[C];2013年
17 丁长涛;杨世锡;甘春标;;典型随机不确定环境下双足机器人的运动稳定性控制[A];第十五届全国非线性振动暨第十二届全国非线性动力学和运动稳定性学术会议摘要集[C];2015年
18 葛一敏;甘春标;杨世锡;;粗糙路面上双足机器人步态规划方法[A];第十届动力学与控制学术会议摘要集[C];2016年
19 梁志伟;宿鲁艳;任彦达;朱松豪;;仿人足球机器人的动态足迹规划算法[A];第24届中国控制与决策会议论文集[C];2012年
20 李建;陈卫东;王丽军;杨军;李慕君;;不平整地面上双足机器人的步态控制[A];2009年中国智能自动化会议论文集(第五分册)[东南大学学报(增刊)][C];2009年
中国博士学位论文全文数据库 前20条
1 孙中波;动态双足机器人有限时间稳定性分析与步态优化控制研究[D];吉林大学;2016年
2 王海燕;液压驱动双足机器人运动系统设计与控制[D];山东大学;2014年
3 刘义祥;含有跖趾关节的气动肌肉驱动双足机器人研究[D];哈尔滨工业大学;2019年
4 罗健文;双足机器人建模分析及其运动控制研究[D];哈尔滨工业大学;2019年
5 吴垚;基于强化学习的双足周期步行控制研究[D];武汉大学;2019年
6 侯文琦;双足机器人行走能耗分析与地面适应性控制方法研究[D];国防科学技术大学;2016年
7 宋夙冕;双足机器人高效行走的自适应控制研究[D];浙江大学;2018年
8 袁海辉;3-D双足机器人的动态步行及其控制方法研究[D];浙江大学;2018年
9 丁长涛;随机不确定扰动下平面双足机器人动力学响应特性研究[D];浙江大学;2016年
10 刘国才;液压驱动双足机器人及其动态平衡运动控制研究[D];哈尔滨工业大学;2017年
11 王紫东;基于欠驱动性的双足机器人高能效行走控制研究[D];浙江大学;2016年
12 胡勇;基于被动性和欠驱动性的双足机器人运动控制研究[D];浙江大学;2012年
13 唐冲;欠驱动双足机器人高效行走控制研究[D];浙江大学;2015年
14 朱洪波;仿人机器人高效步行模式生成与高稳定动态行走控制方法研究[D];中国科学技术大学;2017年
15 刘德君;欠驱动行走机器人步态优化与稳定控制[D];吉林大学;2012年
16 周雪峰;六自由度双足机器人步行研究[D];华南理工大学;2011年
17 张佩杰;欠驱动双足机器人行走步态建模与动态行走控制策略研究[D];吉林大学;2010年
18 毛勇;半被动双足机器人的设计与再励学习控制[D];清华大学;2007年
19 郭发勇;仿人双足机器人多地形步态规划和稳定控制方法研究[D];中国科学技术大学;2016年
20 朱晓光;双足机器人步态与路径规划研究[D];华北电力大学;2012年
中国硕士学位论文全文数据库 前20条
1 刘绍维;基于深度强化学习的准被动双足机器人步态控制策略研究[D];燕山大学;2020年
2 李恒楠;双足机器人行走稳定性控制方法与实验研究[D];哈尔滨工程大学;2009年
3 刘志川;双足机器人的步态控制研究[D];中国科学技术大学;2009年
4 黄涛涛;基于力控制的双足机器人快速步行研究[D];浙江大学;2021年
5 马尊旺;双足机器人动态跑跳步态规划与平衡控制研究[D];浙江大学;2020年
6 冷洁;基于增强学习的2D双足机器人步行控制系统研究[D];重庆邮电大学;2018年
7 梁锦彪;双足机器人的滚动膝盖关节设计与实现[D];上海交通大学;2016年
8 王赟;双足机器人2D雷达检测系统应用研究[D];重庆邮电大学;2019年
9 王成刚;基于双足机器人2D动态稳定的控制力矩陀螺的研究与设计[D];重庆邮电大学;2019年
10 杨鑫;基于SoC和增强学习的平面双足行走控制研究[D];重庆邮电大学;2019年
11 杨洋;含T型髋部的平面双足机器人运动控制研究[D];重庆邮电大学;2019年
12 李阳;基于人体行走轨迹的双足机器人步行样本生成与跟随研究[D];哈尔滨工业大学;2019年
13 刘彪;基于涵道推进器的双足机器人越障姿态及控制方法研究[D];广东工业大学;2019年
14 王挺进;大扰动下人体步行稳定恢复分析策略研究[D];燕山大学;2019年
15 陈鑫;仿人双足机器人步行控制方法研究[D];南京理工大学;2019年
16 李奕达;双足机器人跑跳步态规划与平衡控制研究[D];浙江大学;2019年
17 曾显武;双足机器人设计及步态规划仿真[D];山东大学;2019年
18 孔令文;双足机器人步态稳定控制系统设计[D];吉林大学;2018年
19 王继祥;双足机器人上楼梯步态规划与稳定性研究[D];昆明理工大学;2018年
20 任杰;动态双足机器人步态优化与稳定性研究[D];昆明理工大学;2018年
中国重要报纸全文数据库 前6条
1 成舸;福岛施救:机器人从缺阵到“粉墨登场”[N];科学时报;2011年
2 胡巍巍;双足机器人技术的跃进[N];中国航空报;2021年
3 本报记者 翟冬冬;灵巧度日益接近人类,网红机器人再获跑酷技能[N];科技日报;2021年
4 记者 杨浦东;大型仿人服务机器人很抢眼[N];上海科技报;2021年
5 本报记者 覃岩峰 林红 李焱;让中原动力驱动世界[N];郑州日报;2020年
6 本报记者  张亮;机器人给我们带来了多少神奇?[N];科技日报;2006年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978