收藏本站
《地球信息科学学报》 2013年02期
收藏 | 投稿 | 手机打开
二维码
手机客户端打开本文

基于NoSQL的海量空间数据云存储与服务方法

陈崇成  林剑峰  吴小竹  巫建伟  连惠群  
【摘要】:近年来,实现海量空间数据高效地存储管理和在线服务,成为地学信息科学领域日益关注的热点问题。本文根据矢量和栅格空间数据的不同特点,提出并实现了矢量栅格数据一体化的海量空间数据分布式云存储管理与访问服务方案,在海量矢量数据存储和处理中创新性引入分布式图数据库Neo4J和并行图计算框架。在三层式空间数据云存储架构基础上,给出NoSQL数据库技术的栅格和矢量数据云存储的实现策略与方法,并开展了通用数据访问接口的设计。采用分布式文件系统HDFS存储栅格数据,并使用列族数据库HBase对其建立分布式空间索引,及采用满足ACID约束的分布式图数据库Neo4J来存储矢量数据,并使用R树建立空间索引。在自主研发的地理知识云平台GeoKSCloud框架下,初步实现了核心组件-空间数据聚合中心(GeoDAC)软件,可为各类用户提供空间数据分布式存储管理和访问服务。通过搭建试验床,开展GeoDAC与开源GIS软件PostGIS在矢量数据读写访问性能方面的对比测试。结果表明,虽然GeoDAC没有获得写入性能的加速作用,但其具有PostGIS无法比拟的强大读取性能。GeoDAC将海量数据经过空间分割后分布在集群上,能够并行处理查询请求,极大地提高空间查询速度,具有广阔的应用前景。

【参考文献】
中国期刊全文数据库 前2条
1 王意洁;孙伟东;周松;裴晓强;李小勇;;云计算环境下的分布存储关键技术[J];软件学报;2012年04期
2 林子雨;赖永炫;林琛;谢怡;邹权;;云数据库研究[J];软件学报;2012年05期
【共引文献】
中国期刊全文数据库 前8条
1 李德仁;邵振峰;;论新地理信息时代[J];中国科学(F辑:信息科学);2009年06期
2 何旵阳;;一种可行安全的校园云计算软件架构探究[J];汕头大学学报(自然科学版);2012年02期
3 武文斌;;视频监控云存储模型设计[J];山西科技;2012年03期
4 习万球;;广州信息网格研究[J];图书馆;2008年04期
5 李翠侠;;基于混合云的高校图书馆存储方案研究[J];图书馆学研究;2011年05期
6 黄晓斌;钟辉新;;基于大数据的企业竞争情报系统模型构建[J];情报杂志;2013年03期
7 覃雄派;王会举;李芙蓉;李翠平;陈红;周烜;杜小勇;王珊;;数据管理技术的新格局[J];软件学报;2013年02期
8 魏祥麟;陈鸣;范建华;张国敏;卢紫毅;;数据中心网络的体系结构[J];软件学报;2013年02期
中国重要会议论文全文数据库 前10条
1 李德仁;;论可量测实景影像的概念与应用——从4D产品到5D产品[A];中国测绘学会九届三次理事会暨2007年“信息化测绘论坛”学术年会论文集[C];2007年
2 乔朝飞;;智能化对地观测系统及其对测绘信息化的影响[A];中国测绘学会九届三次理事会暨2007年“信息化测绘论坛”学术年会论文集[C];2007年
3 屈婷;贺武鸣;彭文;张永忠;;航道测绘信息化展望[A];中国测绘学会九届三次理事会暨2007年“信息化测绘论坛”学术年会论文集[C];2007年
4 李德仁;;信息化测绘的本质是服务[A];中国测绘学会九届四次理事会暨2008年学术年会论文集[C];2008年
5 李德仁;;信息化测绘的本质是服务[A];第十届中国科协年会论文集(一)[C];2008年
6 彭明军;;城市空间信息多级网格研究[A];中国地理信息系统协会第四次会员代表大会暨第十一届年会论文集[C];2007年
7 徐志强;王长春;刘春智;;浅谈城市网格化管理[A];吉林省测绘学会2008年学术年会论文集(上)[C];2008年
8 刘金欣;刘鑫欣;高路;魏英勤;孟繁蕴;王永炎;;数字地球技术在中药资源研究中的应用[A];2010年中国药学大会暨第十届中国药师周论文集[C];2010年
9 王金鑫;禄丰年;李辉;;构建地理空间数据生产网格[A];2007'全国测绘科技信息交流会暨信息网成立30周年庆典论文集[C];2007年
10 李德仁;;地球空间信息学及在陆地科学中的应用[A];中国地球物理第二十一届年会论文集[C];2005年
中国博士学位论文全文数据库 前10条
1 王强;空间信息服务聚合的关键技术研究[D];解放军信息工程大学;2010年
2 王晓理;地理信息数据结构处理优化应用研究[D];解放军信息工程大学;2010年
3 谭力;构建基于G/S模式的数字月球平台关键技术研究[D];成都理工大学;2011年
4 刘斌;基于G/S模式的非物质文化遗产异构数据可视化共享机制研究与实现[D];成都理工大学;2011年
5 杜根远;海量遥感图像内容检索关键技术研究[D];成都理工大学;2011年
6 李康荣;空间地理数据剖分网络协议研究[D];成都理工大学;2011年
7 岳利群;基于分布式存储的虚拟地理环境关键技术研究[D];解放军信息工程大学;2011年
8 赵姗;地理空间信息服务与网格集成理论与方法研究[D];解放军信息工程大学;2011年
9 尹立杰;遥感影像数据的保护[D];中国地质大学(北京);2008年
10 滕龙妹;土地资源时空数据网格服务模型及其实现方法[D];浙江大学;2008年
中国硕士学位论文全文数据库 前10条
1 王昱人;电子政务环境下的政府信息资源管理[D];山东师范大学;2011年
2 赵玉萍;基于Visual C++的视频监控系统的软件设计与实现[D];太原理工大学;2011年
3 杨柳;基于云计算的GIS应用模式研究[D];河南大学;2011年
4 张倩;基于云计算环境的数据管理系统研究与应用[D];北京邮电大学;2011年
5 叶雄杰;基于云存储的移动视频监控系统研究[D];广东工业大学;2011年
6 郝伟;湖南移动网管集中云存储平台搭建与测试[D];中南大学;2010年
7 张楠;S-Cloud云备份系统研究与开发[D];长安大学;2011年
8 秦氏雪;城市网格化管理工作流引擎建模与实现[D];电子科技大学;2011年
9 王彩亮;云存储环境下数据副本管理策略研究[D];云南大学;2011年
10 田萍;西安移动网格化管理系统的设计与实现[D];西安科技大学;2011年
【二级参考文献】
中国期刊全文数据库 前7条
1 李德仁;邵振峰;;论新地理信息时代[J];中国科学(F辑:信息科学);2009年06期
2 贾树泽;杨军;施进明;赵金雁;;新一代气象卫星资料处理系统并行调度算法研究与应用[J];气象科技;2010年01期
3 杨军;董超华;卢乃锰;杨忠东;施进明;张鹏;刘玉洁;蔡斌;;中国新一代极轨气象卫星——风云三号[J];气象学报;2009年04期
4 许健民;杨军;张志清;孙安来;;我国气象卫星的发展与应用[J];气象;2010年07期
5 田敬;代亚非;;P2P持久存储研究[J];软件学报;2007年06期
6 陈康;郑纬民;;云计算:系统实例与研究现状[J];软件学报;2009年05期
7 冯登国;张敏;张妍;徐震;;云计算安全研究[J];软件学报;2011年01期
【相似文献】
中国期刊全文数据库 前10条
1 甘勇;韩姗姗;陈国栋;何振;;基于在线存储的对象放置算法的设计与实现[J];郑州轻工业学院学报(自然科学版);2011年01期
2 谢峰;刘妹娟;;浅析云存储信息服务的发展现状及隐忧[J];科技信息;2011年10期
3 王俊修;;基于云计算架构的视频监控系统应用研究[J];中国安防;2011年08期
4 冯丹;;网络存储关键技术的研究及进展[J];移动通信;2009年11期
5 陈莹;罗杰;;“云”在学校计算机公共服务平台的应用探讨[J];硅谷;2009年19期
6 戴元顺;;云计算技术简述[J];信息通信技术;2010年02期
7 张琳;;浅析云计算商业化推动缓慢的原因[J];重庆电力高等专科学校学报;2010年02期
8 石利平;;浅析基于Web的云存储技术[J];现代计算机(专业版);2010年03期
9 陶蕾;;“云”下的图书馆网络存储探讨[J];图书馆学研究;2010年13期
10 黄永峰;张久岭;李星;;云存储应用中的加密存储及其检索技术[J];中兴通讯技术;2010年04期
中国重要会议论文全文数据库 前7条
1 曾文英;赵跃龙;尚敏;;云计算及云存储生态系统研究[A];2010年第16届全国信息存储技术大会(IST2010)论文集[C];2010年
2 朱平;朱建涛;高剑刚;蒋金虎;;高性能计算存储关键技术研究[A];2010年第16届全国信息存储技术大会(IST2010)论文集[C];2010年
3 张学红;刘志芳;;云存储技术研究与探讨[A];全国数字媒体技术专业建设与人才培养研讨会论文集[C];2011年
4 洪澄;张敏;冯登国;;AB-ACCS:一种云存储密文访问控制方法[A];NDBC2010第27届中国数据库学术会议论文集(B辑)[C];2010年
5 林晔;徐颖;;利用虚拟化存储技术实现数据中心机房的安全搬迁[A];中国新闻技术工作者联合会2011年学术年会论文集(上篇)[C];2011年
6 郭英鹏;;云计算环境下的数据中心网络发展初探[A];广东通信2010青年论坛优秀论文集[C];2010年
7 曾东;;一种存储服务构建方法研究[A];2011年全国通信安全学术会议论文集[C];2011年
中国重要报纸全文数据库 前2条
1 白 玲 胡宝国;WEB GIS有何优点[N];中国测绘报;2006年
2 白晓飞 李宪文 陆碧君;信息技术与业务需求的结合[N];中国国土资源报;2006年
中国博士学位论文全文数据库 前3条
1 杨晋强;空间数据集群服务体系结构与算法研究[D];解放军信息工程大学;2010年
2 徐战亚;可移植嵌入式导航平台关键技术研究[D];中国地质大学;2010年
3 吴吉义;基于DHT的开放对等云存储服务系统研究[D];浙江大学;2011年
中国硕士学位论文全文数据库 前10条
1 陈慧英;基于NoSQL数据库的海量天文图像分布存储研究[D];昆明理工大学;2012年
2 朱峰;基于P2P原理的个人云存储应用研究[D];复旦大学;2012年
3 许信;云存储系统服务质量控制与可靠性技术研究[D];浙江大学;2011年
4 徐文强;基于HDFS的云存储系统研究[D];上海交通大学;2011年
5 吴超龙;在线云存储系统的设计与应用[D];华南理工大学;2010年
6 曹则新;云存储中开放网络资源稳定存储机制的研究与实现[D];华中科技大学;2011年
7 艾明;面向海量数据的云存储系统实现与应用研究[D];南京理工大学;2012年
8 陈虎;基于HDFS的云存储平台的优化与实现[D];华南理工大学;2012年
9 陈宬;私有云存储系统元数据管理模块的设计与实现[D];电子科技大学;2012年
10 王开;PDA上GIS、GPS和CDMA通讯的综合应用与实现[D];昆明理工大学;2007年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026