收藏本站
收藏 | 投稿 | 论文排版

基于自注意力机制的视频行为分析

祝伟  吴陈  
【摘要】:视频行为识别是智能视频分析的重要组成部分。传统人体行为识别基于人工设计特征方法涉及的环节多,具有时间开销大,算法难以整体调优的缺点。针对two-stream系列的深度卷积网络,时间网络的输入是直接以相邻两帧的光流场作为输入,其中也包含了镜头移动、背景运动等无关的运动特征的问题,在视频时序上仅通过分块取样固定长度的帧,其中有效的运动信息可能不完整或包含过多的冗余信息等问题。这篇文章提出了时空自注意力运动特征提取的方法,以RGB图像及其相邻帧的灰度图的视频帧块分别作为场景网络和运动网络的输入,采用多尺度视频划分的方式一定程度上避免了因视频过长导致采样运动信息不完整或冗余。然后在多尺度上对场景网络与运动网络通过自注意力机制融合编码,最终输出检测结果。对UCF101与HMDB51数据集的测试准确率分别为94.78%和71.47%。实验表明对于视频行为分析问题,场景与运动特征通过自注意力融合能够有效提升检测精度。

知网文化
【相似文献】
中国期刊全文数据库 前18条
1 王鹏程;;基于深度学习的舞蹈视频分类[J];现代计算机;2021年09期
2 袁韶祖;王雷全;吴春雷;;基于多粒度视频信息和注意力机制的视频场景识别[J];计算机系统应用;2020年05期
3 陈晓博;王婧;王羿;;视频换脸及检测技术综述[J];广播电视信息;2021年05期
4 徐飞;;基于深度学习的视频目标异常行为分析[J];电脑知识与技术;2019年20期
5 涂燕平;;人工智能对视频后期处理的实践探索[J];信息记录材料;2020年11期
6 林强;徐士飞;;基于手机平台的“微视频+微练习”微课时长的优化[J];河北农机;2021年05期
7 周鹏刚;;云南省高速公路视频联网监测实践与思考[J];中国交通信息化;2021年11期
8 何兵雄;;动画短视频的新发展分析[J];西部广播电视;2020年03期
9 ;吉林一号视频07星天安门广场影像图[J];卫星应用;2020年03期
10 葛文;;视频大数据在公安行业的应用分析[J];信息记录材料;2018年10期
11 郭建伟;;让普通视频巧穿3D“外衣”[J];电脑知识与技术(经验技巧);2018年10期
12 张培雪;;小视频里有大教育[J];河南教育(基教版);2021年01期
13 祝福;;“视频号+”与企业数字化转型升级[J];现代广告;2021年Z1期
14 叶小龙;;微视频在初中信息技术教学中的应用分析[J];新课程(下);2019年12期
15 IP45;;播放视频不要自动关闭Aero[J];电脑迷;2007年14期
16 ;横扫所有视频MP3!免转换视频革命开始[J];电脑爱好者;2007年23期
17 ;一步到位视频转到手机看[J];电脑爱好者(普及版);2009年09期
18 木森;;文件无法删除 原来是预览惹的祸[J];电脑爱好者(普及版);2010年08期
中国重要会议论文全文数据库 前20条
1 黄波士;陈福民;史丰;颜焱;;视频内容结构化技术在视频编目系统中的应用[A];第十二届全国图象图形学学术会议论文集[C];2005年
2 郭晓杰;刘文萍;;基于镜头重要度判别的视频摘要技术[A];2007北京地区高校研究生学术交流会通信与信息技术会议论文集(上册)[C];2008年
3 胡胜红;于俊清;;视频适配的关键技术与研究进展[A];第六届和谐人机环境联合学术会议(HHME2010)、第19届全国多媒体学术会议(NCMT2010)、第6届全国人机交互学术会议(CHCI2010)、第5届全国普适计算学术会议(PCC2010)论文集[C];2010年
4 蔡奕奕;覃团发;;一种利用视频切片进行视频检索的方法[A];2007北京地区高校研究生学术交流会通信与信息技术会议论文集(上册)[C];2008年
5 胡洁;李爽爽;;视频监控卡口系统后评价指标体系构建初探[A];第七届中国智能交通年会论文集[C];2012年
6 于俊清;何欢欢;何云峰;;基于情感激励的足球视频精彩镜头提取[A];第四届和谐人机环境联合学术会议论文集[C];2008年
7 丁子昂;夏佳志;管宇;陈为;彭群生;;一种新的基于时空一致性的视频抠取方法[A];中国计算机图形学进展2008--第七届中国计算机图形学大会论文集[C];2008年
8 邱林;李强;;视频行为分析在建筑节能应用中的探讨[A];中国自动化学会控制理论专业委员会C卷[C];2011年
9 彭健;贾彦茹;汪佩;;基于电子稳像的视频序列抖动处理技术[A];2010全国LED显示应用技术交流暨产业发展研讨会文集[C];2010年
10 李小雨;王琳;王辉淇;;基于数字签名的高效视频拷贝检测算法研究[A];中国新闻技术工作者联合会第六次会员代表大会、2014年学术年会暨第七届《王选新闻科学技术奖》和优秀论文奖颁奖大会论文集(二等奖)[C];2014年
11 尹显东;唐丹;姚军;;视频信息屏障技术原理与实现[A];中国工程物理研究院科技年报(2003)[C];2003年
12 任栋;宋伟;于京;姜薇;;特殊视频内容检测算法研究综述[A];第31次全国计算机安全学术交流会论文集[C];2016年
13 吉荣新;唐后富;;基于视频感知的轨道入侵预警系统研究[A];物联网与无线通信-2018年全国物联网技术与应用大会论文集[C];2018年
14 廖嘉;王国仁;张博;;一种有效的基于关联规则的视频分类方法[A];第二十三届中国数据库学术会议论文集(研究报告篇)[C];2006年
15 蒋慧钧;;视频修复技术在影像资料数字化中的应用研究[A];中国新闻技术工作者联合会2008年学术年会论文集(中)[C];2008年
16 赵岩;;飞机仪表图像的视频遥测研究与实现[A];2012航空试验测试技术学术交流会论文集[C];2012年
17 梁杨;陶霖密;宋斌恒;;多通道视频数据处理平台的设计与实现[A];第二届和谐人机环境联合学术会议(HHME2006)——第2届中国人机交互学术会议(CHCI'06)论文集[C];2006年
18 赵语涛;刘允才;;单幅图像的多媒体流体视频合成[A];第四届和谐人机环境联合学术会议论文集[C];2008年
19 吴敏萍;陈波;赵清;;公共安全视频大数据智能应用研究[A];2019年全国公共安全通信学术研讨会优秀论文集[C];2019年
20 杜虹;;微机视频信息相关干扰保护技术研究[A];第十一届全国计算机安全技术交流会论文集[C];1996年
中国博士学位论文全文数据库 前20条
1 郭杰;面向微视频的场景识别关键问题研究[D];山东大学;2020年
2 刘毅捷;视频社区中海量数据管理方法研究[D];中国科学技术大学;2011年
3 郭大山;基于上下文的视频理解关键技术研究[D];上海交通大学;2019年
4 裴利沈;视频中人体行为识别若干问题研究[D];电子科技大学;2016年
5 王觅;面向碎片化学习时代微视频课程的内容设计[D];华东师范大学;2013年
6 白亮;本体支持的视频情报分析方法与技术研究[D];国防科学技术大学;2008年
7 李岳楠;视频信息内容管理关键问题研究[D];哈尔滨工业大学;2010年
8 蒋鹏;基于语义的视频内容提取与分析关键技术研究[D];南京航空航天大学;2009年
9 丁昕苗;基于多示例学习的恐怖视频识别技术研究[D];中国矿业大学(北京);2013年
10 杨科;基于深度学习的视频分类和检测关键技术研究[D];国防科技大学;2019年
11 谢文龙;基于主题保持的视频紧凑表达研究[D];哈尔滨工业大学;2020年
12 饶云波;夜间视频增强的关键技术研究[D];电子科技大学;2012年
13 朱光宇;基于队员行为信息的体育视频内容分析方法研究[D];哈尔滨工业大学;2009年
14 曹海傧;海量视频的分布式协作处理与检索研究[D];中国科学技术大学;2013年
15 刘守群;海量网络视频快速检索关键技术研究[D];中国科学技术大学;2010年
16 孙中华;基于内容的视频结构分析与摘要方法研究[D];吉林大学;2007年
17 程治淇;面向视频电商的推荐、匹配、链接与识别关键技术研究[D];西南交通大学;2019年
18 汤志伟;面向公安业务的视频结构化描述研究与实现[D];上海大学;2015年
19 何云峰;视频内容组织与索引技术研究[D];华中科技大学;2011年
20 管宇;图像和视频的便捷抠图技术研究[D];浙江大学;2008年
中国硕士学位论文全文数据库 前20条
1 陈思雨;基于生成对抗网络的视频生成系统方法研究与实现[D];东北师范大学;2020年
2 张智峰;基于深度学习的视频插帧技术研究[D];上海交通大学;2019年
3 王博凡;视频监控场景下的行为识别方法研究与实现[D];东南大学;2020年
4 李玉鹏;基于深度学习的视频行为识别研究与实现[D];中国民航大学;2020年
5 包秀平;面向短视频的主题识别研究[D];南京航空航天大学;2020年
6 林志坤;基于3D可逆网络的视频分类研究[D];电子科技大学;2020年
7 何庆强;基于深度学习的视频内容识别技术研究[D];电子科技大学;2017年
8 张博伦;基于注意力机制与图卷积网络的视频问答研究[D];哈尔滨理工大学;2021年
9 冯凯;基于深度特征的视频内容检索研究[D];武汉邮电科学研究院;2021年
10 吴文灏;基于深度学习的视频识别研究[D];中国科学院大学(中国科学院深圳先进技术研究院);2020年
11 薛茜;基于深度学习的视频动作检测算法研究[D];北京邮电大学;2020年
12 徐磊;视频事件结构化描述方法研究[D];南京邮电大学;2017年
13 祝伟;基于深度学习的视频行为分析[D];江苏科技大学;2020年
14 乔心舒;基于深度视觉表示的视频识别算法研究[D];南京理工大学;2019年
15 王领;基于内容的视频拷贝检测[D];大连理工大学;2017年
16 高振华;微视频在小学体育教师磨课中的应用现状及影响因素研究[D];曲阜师范大学;2021年
17 何红伟;抖音平台中图书短视频的传播现状及问题研究[D];北京印刷学院;2021年
18 杨松;针对手持设备拍摄视频的背景替换[D];山东大学;2015年
19 王辰龙;基于结构和融合的特定敏感视频识别技术[D];北京交通大学;2015年
20 王思思;国内外网络视频公开课在我国的需求和应用情况调查研究[D];上海师范大学;2013年
中国重要报纸全文数据库 前20条
1 本报记者 彭科峰;图像视频大数据:沙里如何淘金[N];中国科学报;2014年
2 IT时报记者 潘少颖;微信视频号连发“三弹”大变身[N];IT时报;2020年
3 记者 季俊磊;短视频成学习新途径[N];金华日报;2019年
4 本报记者 刘霞;李鬼变李逵!“深度造假”视频危害日益加剧[N];科技日报;2019年
5 郑宇飞;视频说书终究不能代替读书[N];北京日报;2021年
6 本报记者 熊雯琳;广电总局整顿TV版视频APP[N];电脑报;2014年
7 IT时报记者 李丹琦;视频号:平民的“出圈口”,达人的“搬运工”?[N];IT时报;2020年
8 北京商报记者 魏蔚;乐视视频App借“七夕表白”规模营销[N];北京商报;2014年
9 ;不修复!直接看“残缺”视频[N];中国计算机报;2005年
10 记者 陶健 通讯员 司月洁;省际班车将安装视频监控[N];解放日报;2009年
11 ;留住美好时光,快速编辑春节家庭视频[N];电脑报;2020年
12 本报通讯员 陈昭 记者 沈春蕾;视频大数据时代的“火眼金睛”[N];中国科学报;2017年
13 本报记者 郑金武;图像视频大数据产业发展正当时[N];中国科学报;2015年
14 ;视频数据中挖“宝”[N];计算机世界;2002年
15 ;移花接木,视频抠像一起玩[N];电脑报;2021年
16 本报记者 李惠钰;交互成VR视频新风向[N];中国科学报;2017年
17 本报记者 张淑芳;PPlive:资源化生存的网络视频[N];中国经营报;2009年
18 本报记者 刘旭颖;短视频或成兴趣教育新赛道[N];国际商报;2021年
19 本报记者 张文静 实习生 王东丽;论文+视频:会成为学术发表新标配吗[N];中国科学报;2021年
20 实习记者 唐芳;AI“透视眼”从视频中认出“嫌疑人”[N];科技日报;2018年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978