收藏本站
《计算机研究与发展》 2011年S3期
收藏 | 投稿 | 手机打开
二维码
手机客户端打开本文

FDSS:基于HDFS的海量音乐特征数据存储系统

范远超  徐辰  于政  周敏奇  王晓玲  
【摘要】:随着互联网上音乐数目的迅速增长,传统的单机和小规模分布式平台已经不能满足海量音乐特征数据管理的需要;Hadoop分布式文件系统(HDFS)具有可扩展性、高可用性、容错性的优势,为海量音乐特征数据提供了有效的管理平台.提出了海量音乐特征数据存储系统FDSS:基于HDFS平台和MapReduce框架,设计了音乐特征数据的存储结构,实现了海量音乐特征数据的存储和读取;结合格雷码为音乐特征数据建立索引,优化了数据分布和快速读取;引入分布式内存缓存Memcached存储频繁访问的数据,优化了数据读取时间.系统演示了对海量级音乐特征数据的分布式存储和对指定音乐特征数据的快速读取功能.

【相似文献】
中国期刊全文数据库 前10条
1 陈俊;陈孝威;;基于Hadoop建立云计算系统[J];贵州大学学报(自然科学版);2011年03期
2 郑启龙;汪睿;王向前;;HPMR内存管理模块优化设计[J];计算机系统应用;2011年08期
3 李珺;;基于Hadoop云计算模型探究[J];信息安全与技术;2011年06期
4 李远方;贾时银;邓世昆;韩月阳;;基于树结构的MapReduce模型[J];计算机技术与发展;2011年08期
5 李明;胥光辉;戢瑶;;MapReduce编程模型在网络I/O密集型程序中的应用研究[J];计算机应用研究;2011年09期
6 刘琨;董龙江;;云数据存储与管理[J];计算机系统应用;2011年06期
7 ;[J];;年期
8 ;[J];;年期
9 ;[J];;年期
10 ;[J];;年期
中国博士学位论文全文数据库 前2条
1 郑霄;超级计算机系统的可用性评估研究[D];解放军信息工程大学;2009年
2 洪春涛;众核处理器编程模式关键技术研究[D];清华大学;2011年
中国硕士学位论文全文数据库 前10条
1 朱盛凯;基于MapReduce的科学计算应用性能分析与优化[D];复旦大学;2010年
2 蔡睿诚;基于HDFS的小文件处理与相关MapReduce计算模型性能的优化与改进[D];吉林大学;2012年
3 何荣波;MapReduce模型在Hadoop中的性能优化及改进[D];北京化工大学;2011年
4 张琦;基于MapReduce的分布式规则匹配系统的研究与实现[D];浙江大学;2011年
5 付东华;基于HDFS的海量分布式文件系统的研究与优化[D];北京邮电大学;2012年
6 黄晓云;基于HDFS的云存储服务系统研究[D];大连海事大学;2010年
7 黑继伟;基于分布式并行文件系统HDFS的副本管理模型[D];吉林大学;2010年
8 吴贵鑫;云计算中的MapReduce并行编程模式研究[D];河南理工大学;2010年
9 常涛;改进型MapReduce框架的研究与设计[D];北京邮电大学;2011年
10 陈殿伟;基于Hadoop的虚拟筛选海量数据存储及结果处理的设计和实现[D];兰州大学;2012年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026