收藏本站
收藏 | 投稿 | 手机打开
二维码
手机客户端打开本文

时频联合长时循环神经网络

庄连生  吕扬  杨健  李厚强  
【摘要】:时间序列建模问题因有着重要的应用价值已经成为机器学习领域的研究热点之一.循环神经网络(recurrent neural network, RNN)是近年来时间序列建模的一个重要工具.但是,现有循环神经网络无法处理长时依赖关系的时序数据,也没有在频域对时间序列数据的特征模式进行建模.对于那些包含长时依赖且频率成分丰富的时序数据,这2个问题大大限制了现有循环神经网络的性能.针对这些问题,提出了时频联合长时循环神经网络(long term recurrent neural network with state-frequency memory, LTRNN-SFM),通过将传统循环神经网络隐藏层的状态向量替换为状态-频率矩阵,实现对时间序列的时域特征和频域特征的联合建模.同时,通过解耦隐藏层神经元、引入ReLU(rectified linear unit)激活函数和权重裁剪,该模型可以有效避免梯度消失和梯度爆炸问题的干扰,使得深层网络训练更加容易、网络记忆周期更长.实验表明:时频联合长时循环神经网络在处理长时依赖且频率成分丰富的时序数据上,取得了最好的性能.

知网文化
【相似文献】
中国期刊全文数据库 前17条
1 曾维亮;林志贤;陈永洒;;基于卷积神经网络的智能冰箱果蔬图像识别的研究[J];微型机与应用;2017年08期
2 赵慧珍;刘付显;李龙跃;罗畅;;基于混合maxout单元的卷积神经网络性能优化[J];通信学报;2017年07期
3 张庆辉;万晨霞;陈众威;;基于改进卷积神经网络的手写体识别研究[J];中原工学院学报;2017年04期
4 张国云;向灿群;罗百通;郭龙源;欧先锋;;一种改进的人脸识别CNN结构研究[J];计算机工程与应用;2017年17期
5 荣光辉;黄震华;;基于深度学习的问答匹配方法[J];计算机应用;2017年10期
6 李盛秋;赵妍妍;秦兵;刘挺;;基于LSTM网络的评价对象和评价词抽取[J];智能计算机与应用;2017年05期
7 马猛;王明红;;基于进化神经网络的304不锈钢车削加工表面粗糙度预测[J];轻工机械;2019年06期
8 王方;苗放;陈垦;;基于优化神经网络的地质灾害监测预警仿真[J];计算机仿真;2019年11期
9 迟惠生;陈珂;;1995年世界神经网络大会述评[J];国际学术动态;1996年01期
10 吴立可;;脉冲神经网络和行为识别[J];通讯世界;2018年12期
11 林嘉应;郑柏伦;刘捷;;基于卷积神经网络的船舶分类模型[J];信息技术与信息化;2019年02期
12 俞颂华;;卷积神经网络的发展与应用综述[J];信息通信;2019年02期
13 韩真;凯文·哈特尼特;;为神经网络的通用理论建造基石[J];世界科学;2019年04期
14 鲍伟强;陈娟;熊涛;;基于进化神经网络的短期电力负荷预测研究[J];电工技术;2019年11期
15 陈晓燕;;浅析简单神经网络的发展及简单模型[J];数字技术与应用;2019年05期
16 李青华;李翠平;张静;陈红;王绍卿;;深度神经网络压缩综述[J];计算机科学;2019年09期
17 刘高宇;;深度神经网络在煤质数据分析与预测中的应用[J];电脑知识与技术;2019年28期
中国重要会议论文全文数据库 前10条
1 许进;保铮;;神经网络与图论[A];1999年中国神经网络与信号处理学术会议论文集[C];1999年
2 唐墨;王科俊;;自发展神经网络的混沌特性研究[A];2009年中国智能自动化会议论文集(第七分册)[南京理工大学学报(增刊)][C];2009年
3 张广远;万强;曹海源;田方涛;;基于遗传算法优化神经网络的故障诊断方法研究[A];第十二届全国设备故障诊断学术会议论文集[C];2010年
4 李涛;费树岷;;具有变时滞Cohen-Grossberg神经网络的指数稳定性准则[A];第二十六届中国控制会议论文集[C];2007年
5 汪灵枝;秦发金;;具有变时滞和脉冲的离散Cohen-Grossberg神经网络的周期解[A];中国自动化学会控制理论专业委员会D卷[C];2011年
6 韩正之;林家骏;;用神经网络求解非线性相容方程[A];1993年控制理论及其应用年会论文集[C];1993年
7 林家骏;王赞基;;求解不可微优化问题的连续极大熵神经网络[A];1998年中国智能自动化学术会议论文集(上册)[C];1998年
8 姜德宏;徐德民;任章;;基于神经网络的自校正控制器[A];1993中国控制与决策学术年会论文集[C];1993年
9 窦永丰;贝超;;模糊与神经网络结合方式及在控制中的应用[A];1997年中国控制会议论文集[C];1997年
10 潘永泉;;基于神经网络的图像序列参数估计方法[A];1994中国控制与决策学术年会论文集[C];1994年
中国博士学位论文全文数据库 前10条
1 赵博雅;基于卷积神经网络的硬件加速器设计及实现研究[D];哈尔滨工业大学;2018年
2 肖理业;基于机器学习的电磁场建模与设计研究[D];电子科技大学;2019年
3 梁智杰;聋哑人手语识别关键技术研究[D];华中师范大学;2019年
4 付钱华;忆阻神经网络的动力学研究[D];电子科技大学;2019年
5 张马路;Spiking机器学习算法研究[D];电子科技大学;2019年
6 饶红霞;信息受限下神经网络的状态估计和拟同步研究[D];广东工业大学;2019年
7 靳然;基于神经网络和支持向量机的麦蚜发生动态预测研究[D];山西农业大学;2017年
8 李若霞;基于忆阻的神经网络的动力学分析及应用[D];东南大学;2017年
9 项延德;基于卷积神经网络的心电信号检测和分类研究[D];浙江大学;2018年
10 李扬;面向图像目标识别和检测的深度神经网络关键技术研究[D];北京邮电大学;2018年
中国硕士学位论文全文数据库 前10条
1 郭田梅;基于卷积神经网络的图像分类算法研究[D];济南大学;2017年
2 李娜;基于神经网络的灌注桩故障诊断技术[D];河北工业大学;2007年
3 欧明望;基于神经网络的智能医疗诊断研究[D];海南大学;2019年
4 贺彬;基于BP神经网络和Kalman滤波的室内定位算法研究[D];山西大学;2019年
5 刘小文;卷积神经网络在图像分类中的网络结构优化[D];山西大学;2019年
6 张萌岩;基于深度学习的服装图像属性标签识别与关键点定位研究[D];武汉纺织大学;2019年
7 张涛;一种基于长短期记忆神经网络的火电厂NO_x排放量预测方法[D];华北电力大学(北京);2019年
8 罗嗣棂;基于长短时记忆神经网络的风电机组健康状态评估与预测研究[D];华北电力大学(北京);2019年
9 王碧霄;基于深度学习的电力视觉终端目标检测系统研究[D];华北电力大学(北京);2019年
10 刘建伯;基于卷积神经网络图像分类方法研究及应用[D];东北石油大学;2018年
中国重要报纸全文数据库 前10条
1 张允硕 姜正义 甄海锋 河南理工大学;基于神经网络的自适应PID控制的智能衣架[N];科学导报;2019年
2 记者 刘霞;忆阻器制成神经网络更高效[N];科技日报;2017年
3 ;神经网络小史[N];电子报;2018年
4 张敏;人机大战,到底谁会赢?[N];北京日报;2017年
5 ;人工智能将取得大面积突破[N];中国企业报;2017年
6 本报记者 龚丹韵;人机大战:人类还有优势吗[N];解放日报;2017年
7 中国科学技术大学终身学习实验室博士 吴茂乾;“寒武纪”人工智能大爆发的前夜[N];安徽日报;2017年
8 卡内基·梅隆大学计算机科学学院机器学习系主任 Tom Mitchell;突破人类和机器的边界[N];中国信息化周报;2017年
9 舒年;“深度学习”与人工智能的新挑战[N];工人日报;2017年
10 记者 刘霞;新神经网络使计算机像人一样推理[N];科技日报;2017年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978