收藏本站
《中国图象图形学报》 2015年07期
收藏 | 投稿 | 手机打开
二维码
手机客户端打开本文

MapReduce模式下高光谱图像端元提取算法加速

曲海成  籍瑞庆  刘万军  梁雪剑  
【摘要】:目的随着成像光谱仪的发展,高光谱遥感图像的空间分辨率和光谱分辨率越来越大,这给高光谱遥感图像解译处理及应用带来挑战。本文提出一种基于MapReduce模式的分布式混合并行处理模型来加速高光谱解混处理。方法为降低算法计算复杂度,对原串行算法进行并行化设计,并采用行列式分块计算法对原算法进行化简计算;最后在分布式集群环境下,采用Jama和JCuda组件来加速算法执行过程中的矩阵运算操作。结果针对224波段,400×400像素空间分辨率的高光谱图像,采用分布式混合计算模型进行解混处理比原始的处理方法在速度上有近十倍的提高,且算法计算量越大,加速效果越明显。结论本文提出了一种基于MapReduce模式的分布式混合并行处理方法来加速最大单形体体积端元提取算法,加速效果明显;采用分块法求解行列式可以大大降低算法复杂度。该方法对计算任务可并行划分、主机与节点间数据交换量少且计算复杂类算法加速效果明显。

【参考文献】
中国期刊全文数据库 前4条
1 赵春晖;齐滨;王玉磊;;一种改进的N-FINDR高光谱端元提取算法[J];电子与信息学报;2012年02期
2 卢风顺;宋君强;银福康;张理论;;CPU/GPU协同并行计算研究综述[J];计算机科学;2011年03期
3 李成华;张新访;金海;向文;;MapReduce:新型的分布式并行计算编程模型[J];计算机工程与科学;2011年03期
4 丁海勇;史文中;;利用卡方分布改进N-FINDR端元提取算法[J];遥感学报;2013年01期
【共引文献】
中国期刊全文数据库 前10条
1 高飞;张琦;李泽强;;基于云计算技术的影视节目版权交易云平台的构建[J];广播与电视技术;2012年07期
2 王加亮;秦勃;刘健健;刘妮;;基于MapReduce的交互可视化平台[J];电信科学;2012年09期
3 杨芳菊;;基于CPU/GPU异构平台并行优化的研究[J];电脑编程技巧与维护;2012年18期
4 刘军志;朱阿兴;秦承志;陈腊娇;吴辉;江净超;;分布式水文模型的并行计算研究进展[J];地理科学进展;2013年04期
5 王伟;;大数据分析——RDBMS与MapReduce的竞争与共生漫谈[J];计算机光盘软件与应用;2013年07期
6 方留杨;王密;李德仁;;CPU和GPU协同处理的光学卫星遥感影像正射校正方法[J];测绘学报;2013年05期
7 陈韬;万麟瑞;;基于云平台的VMI库存管理系统架构研究[J];计算机光盘软件与应用;2013年22期
8 杨清山;刘堃;熊飞;钟立俊;邴丕浩;;基于GPU的并行区域场强计算[J];电子信息对抗技术;2013年06期
9 杜旭;刘森;颜璟仪;;基于Hadoop的智能电网监控系统的设计与实现[J];科技创新与应用;2014年17期
10 方留杨;王密;李德仁;潘俊;;负载分配的CPU/GPU高分辨率卫星影像调制传递补偿方法[J];测绘学报;2014年06期
中国重要会议论文全文数据库 前3条
1 ;Research on DSP-GPU Heterogeneous Computing System[A];Information Technology and Computer Science—Proceedings of 2012 National Conference on Information Technology and Computer Science[C];2012年
2 高飞;张琦;李泽强;;基于云计算技术的影视节目版权交易云平台的构建[A];中国新闻技术工作者联合会2013年学术年会、五届五次理事会暨第六届“王选新闻科学技术奖”和优秀论文奖颁奖大会论文集(广电篇)[C];2013年
3 魏一苇;黄世奇;刘代志;;基于独立成分分析的高光谱混合像元分解方法[A];国家安全地球物理丛书(八)——遥感地球物理与国家安全[C];2012年
中国博士学位论文全文数据库 前10条
1 江涵;大规模电力系统暂态稳定并行计算研究[D];浙江大学;2012年
2 汪逸群;成像光谱仪运动补偿实现技术的研究[D];中国科学院研究生院(长春光学精密机械与物理研究所);2013年
3 王来刚;基于多源遥感信息融合的小麦生长监测研究[D];南京农业大学;2012年
4 崔继承;O_2A带高分辨率光谱测试技术研究[D];中国科学院研究生院(长春光学精密机械与物理研究所);2013年
5 周勇;基于并行计算的数据流处理方法研究[D];大连理工大学;2013年
6 王爽;大孔径静态干涉光谱成像仪信噪比研究[D];中国科学院研究生院(西安光学精密机械研究所);2013年
7 李金亚;科尔沁沙地草原沙化时空变化特征遥感监测及驱动力分析[D];中国农业科学院;2014年
8 刘寿生;虚拟现实仿真平台异构并行计算关键技术研究[D];中国海洋大学;2014年
9 崔树林;基于GPU的并行矢量数据分析与索引技术研究[D];中国科学院研究生院(东北地理与农业生态研究所);2014年
10 王霄鹏;黄河三角洲湿地典型植被高光谱遥感研究[D];大连海事大学;2014年
中国硕士学位论文全文数据库 前10条
1 陈勃;基于Nutch的企业搜索引擎的研究与实现[D];华中科技大学;2011年
2 杨博;深穿透粒子输运蒙特卡罗模拟的CPU/GPU协同算法研究[D];国防科学技术大学;2011年
3 石志才;异构平台上协同计算的相关研究[D];国防科学技术大学;2011年
4 王翔;球谐函数展开快速算法及其并行算法研究[D];国防科学技术大学;2011年
5 吕东川;基于并行计算的脑电信号分析方法研究[D];燕山大学;2012年
6 栗超;一种三维可视化系统的优化策略[D];燕山大学;2012年
7 刘永;云计算环境下虚拟机资源调度策略研究[D];山东师范大学;2012年
8 孙晴晴;光谱解混技术的研究及其在油量分析中的应用[D];大连海事大学;2012年
9 遆鸣;云计算下计算能力调度算法的研究与改进[D];太原理工大学;2012年
10 魏玉英;基于MapReduce的网络书写纹识别关键技术研究[D];华中师范大学;2012年
【二级参考文献】
中国期刊全文数据库 前10条
1 汪廷华;田盛丰;黄厚宽;;特征加权支持向量机[J];电子与信息学报;2009年03期
2 田江;顾宏;;孤立点一类支持向量机算法研究[J];电子与信息学报;2010年06期
3 陶剑文;王士同;;具有磁场效应的大间隔支持向量机[J];电子与信息学报;2011年05期
4 王立国;张晶;刘丹凤;王群明;;从端元选择到光谱解混的距离测算方法[J];红外与毫米波学报;2010年06期
5 ;Multi-scale HPC system for multi-scale discrete simulation—Development and application of a supercomputer with 1 Petaflops peak performance in single precision[J];Particuology;2009年04期
6 周锋;李旭伟;;一种改进的MapReduce并行编程模型[J];科协论坛(下半月);2009年02期
7 吴恩华;图形处理器用于通用计算的技术、现状及其挑战[J];软件学报;2004年10期
8 陈康;郑纬民;;云计算:系统实例与研究现状[J];软件学报;2009年05期
9 孙广中;肖锋;熊曦;;MapReduce模型的调度及容错机制研究[J];微电子学与计算机;2007年09期
10 郑启龙;王昊;吴晓伟;房明;;HPMR:多核集群上的高性能计算支撑平台[J];微电子学与计算机;2008年09期
中国硕士学位论文全文数据库 前2条
1 吴强;GPU加速高速粒子碰撞模拟[D];国防科学技术大学;2009年
2 方旭东;面向大规模科学计算的CPU-GPU异构并行技术研究[D];国防科学技术大学;2009年
【相似文献】
中国期刊全文数据库 前10条
1 齐建成;朱述龙;朱宝山;赵泳;李二森;;图像端元全自动提取方法研究[J];海洋测绘;2009年02期
2 朱述龙;齐建成;朱宝山;曹闻;;以凸面单体边界为搜索空间的端元快速提取算法[J];遥感学报;2010年03期
3 王立国;张晶;刘丹凤;王群明;;从端元选择到光谱解混的距离测算方法[J];红外与毫米波学报;2010年06期
4 曹建农;王贝贝;何晓宁;;高光谱端元自动确定与提取的迭代算法[J];遥感学报;2013年02期
5 吴波,张良培,李平湘;高光谱端元自动提取的迭代分解方法[J];遥感学报;2005年03期
6 陈子玄;武文波;;基于线性混合模型的端元提取方法综述[J];测绘科学;2008年S3期
7 陈子玄;武文波;;基于线性混合模型的端元提取方法综述[J];测绘科学;2008年S1期
8 李熙;关泽群;秦昆;张力;曹灵灵;;基于贝叶斯推理的像元内部端元选择模型[J];光学学报;2009年09期
9 彭青青;杨辽;王杰;沈金祥;;基于异常探测的高光谱端元提取方法研究[J];遥感技术与应用;2011年04期
10 崔建涛;王晶;厉小润;赵辽英;;基于空间像素纯度指数的端元提取算法[J];浙江大学学报(工学版);2013年09期
中国重要会议论文全文数据库 前2条
1 王百合;刘志刚;李义红;;基于光谱角分析的端元光谱聚类方法研究[A];国家安全地球物理丛书(九)——防灾减灾与国家安全[C];2013年
2 李明诗;刘勇;伍亭;;南京市不透水层时空模式遥感制图研究[A];第九届长三角科技论坛(测绘分论坛)论文集[C];2012年
中国博士学位论文全文数据库 前4条
1 齐滨;高光谱图像分类及端元提取方法研究[D];哈尔滨工程大学;2012年
2 黄远程;高光谱影像混合像元分解的若干关键技术研究[D];武汉大学;2010年
3 杨华东;高光谱遥感影像光谱解混算法研究[D];大连海事大学;2015年
4 李智勇;高光谱图像异常检测方法研究[D];国防科学技术大学;2004年
中国硕士学位论文全文数据库 前10条
1 张甬荣;基于有效端元集的双线性解混模型研究及应用[D];大连海事大学;2013年
2 刘正春;多端元光谱混合分析方法研究[D];中南大学;2012年
3 刘益世;高光谱遥感混合像元端元提取研究及应用[D];中南大学;2013年
4 武鹤;基于数学形态学的高光谱图像端元提取技术研究[D];成都理工大学;2011年
5 曾凡霞;高光谱遥感图像端元提取算法改进及性能优化[D];成都理工大学;2013年
6 王丽姣;基于单形体体积增长的高光谱图像端元提取及快速实现[D];浙江大学;2015年
7 薛绮;基于线性混合模型的高光谱图像端元提取方法研究[D];国防科学技术大学;2004年
8 张娇;基于多端元光谱混合分解的高分辨率影像城市亚像元分类[D];华东师范大学;2014年
9 牛贝贝;高光谱遥感影像端元提取算法研究及应用[D];中南大学;2014年
10 刘锋;高光谱数据降维及端元提取[D];北京理工大学;2008年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026