收藏本站
《辽宁大学学报(自然科学版)》 2018年03期
收藏 | 投稿 | 手机打开
二维码
手机客户端打开本文

指纹极值的双层重复数据删除算法

王青松  葛慧  
【摘要】:为提高重复数据删除算法的重删率,减少CDC算法边界硬分块,使重复数据删除率和性能之间得到平衡,提出了指纹极值的双层重复数据删除算法(DDFE).首先在第一层重复数据删除模型中使用较大的分块大小,保证重删操作的速度;然后将第一层模型重删后的不重复数据输入到分块大小较小的第二层重复数据删除模型,保证重复数据删除的精度.数据分块时,在可容忍范围内,提出了指纹极值的分块算法,减少了硬分块对重复删除的影响.在多种分块组合下的实验结果表明,与任何传统的单层重复数据删除算法相比,DDFE能够较好地防止硬分块、平衡性能和时间,在大量小数据块和频繁变化的数据间有效地消除更多的重复数据.
【作者单位】辽宁大学信息学院
【基金】:国家自然科学基金资助项目(61502215)
【分类号】:TP333;TP309.3

【相似文献】
中国期刊全文数据库 前10条
1 王青松;葛慧;;指纹极值的双层重复数据删除算法[J];辽宁大学学报(自然科学版);2018年03期
2 朱江;冀鸣;杨志成;张嘉贤;曹雄;;基于重复数据删除技术的存储系统分析[J];信息系统工程;2017年04期
3 陈晓;张龙军;王谦;;集群重复数据删除策略的研究[J];电子制作;2016年04期
4 刘华楠;;重复数据删除专利技术综述[J];河南科技;2014年16期
5 李超;王树鹏;云晓春;周晓阳;陈明;;一种基于流水线的重复数据删除系统读性能优化方法[J];计算机研究与发展;2013年01期
6 拜路;;重复数据删除技术分析及其对存储系统性能的影响[J];电脑编程技巧与维护;2012年06期
7 卢敏;;点亮“重复数据删除”[J];软件世界;2008年06期
8 于丹;;昆腾进入重复数据删除市场[J];每周电脑报;2007年09期
9 王龙翔;董小社;张兴军;王寅峰;公维峰;魏晓林;;内容分块算法中预期分块长度对重复数据删除率的影响[J];西安交通大学学报;2016年12期
10 董楠楠;于悦;喻兰;文楠;;一种基于相似性的分布式重复数据删除方法[J];中国新通信;2018年12期
中国重要会议论文全文数据库 前6条
1 贾志凯;王树鹏;陈光达;彭成;;一种并行层次化的重复数据删除技术[A];2010年第16届全国信息存储技术大会(IST2010)论文集[C];2010年
2 杨廷梧;;基于重复数据删除的靶场试验信息存储技术[A];2009年西部光子学学术会议论文摘要集[C];2009年
3 肖钧;黄亮;;虚拟化搭配去重,双剑合璧更给力[A];2011年CAD/CAM学术交流会议论文集[C];2011年
4 姜晓夏;杨岩;王羽;葛唯益;王振宇;;一种基于重复数据删除技术的文件系统瘦身方法[A];第六届中国指挥控制大会论文集(下册)[C];2018年
5 彭成;王树鹏;贾志凯;;基于纠删码的数据消冗存储系统可靠性增强研究[A];2010年第16届全国信息存储技术大会(IST2010)论文集[C];2010年
6 于春生;;浅谈绿色存储[A];2008年电力信息化高级论坛论文集[C];2008年
中国重要报纸全文数据库 前10条
1 本报记者 郭平;惠普创新重复数据删除2.0[N];计算机世界;2012年
2 本报记者 郭平;重复数据删除进入主存储[N];计算机世界;2009年
3 ;如何购买重复数据删除产品?[N];网络世界;2009年
4 ;重复数据删除技术可降低存储成本[N];人民邮电;2009年
5 郭涛;重复数据删除技术同样适用于主存储[N];中国计算机报;2008年
6 刘;Data Domain DD690高效重复数据删除[N];电脑商报;2008年
7 中国传媒大学计算机学院 朱立谷;重复数据删除:改写存储行业经济规则?[N];中国计算机报;2007年
8 张群英;重复数据删除技术异军突起[N];网络世界;2006年
9 北京威视数据系统有限公司解决方案中心技术总监 潘增;重复数据删除技术的四大优势[N];中国计算机报;2007年
10 SEPATON技术支持中心 杨涛;SEPATON:重复数据删除五步走[N];中国计算机报;2007年
中国博士学位论文全文数据库 前10条
1 贺秦禄;云存储环境下重复数据删除关键技术研究[D];西北工业大学;2016年
2 王国华;高效重复数据删除技术研究[D];华南理工大学;2014年
3 周正达;信息存储系统中重复数据删除技术的研究[D];华中科技大学;2012年
4 付印金;面向云环境的重复数据删除关键技术研究[D];国防科学技术大学;2013年
5 朱锐;重复数据删除技术中的并行性能优化算法研究[D];华中科技大学;2013年
6 叶鹏迪;云存储系统资源管理关键技术研究[D];北京邮电大学;2014年
7 林彬;主存储服务系统中高I/O性能的重复数据删除技术研究[D];国防科学技术大学;2014年
8 周景才;云数据中心软件节能关键技术的研究[D];武汉大学;2016年
9 李君;云计算环境下分布式存储关键技术研究[D];电子科技大学;2017年
10 罗四维;云计算环境分布式存储关键技术的研究[D];电子科技大学;2016年
中国硕士学位论文全文数据库 前10条
1 张学成;面向负载均衡的重复数据删除研究与优化[D];国防科学技术大学;2015年
2 李芳;应用感知的重复数据删除关键技术研究[D];国防科学技术大学;2014年
3 黄可;重复数据可删除的云数据审计协议的研究[D];电子科技大学;2015年
4 易璐;重复数据删除技术在基于云存储的智能电网中的应用研究[D];华北电力大学;2013年
5 尚颖丹;面向文件级重复数据删除的稀疏索引技术[D];国防科学技术大学;2012年
6 沈瑞清;云存储中避免重复数据存储机制研究[D];云南大学;2013年
7 王兴;重复数据删除系统的性能优化研究[D];华中科技大学;2013年
8 胡盼盼;在线重复数据删除技术的研究与实现[D];华中科技大学;2011年
9 曾涛;重复数据删除技术的研究与实现[D];华中科技大学;2011年
10 陈正国;基于闪存固态盘的重复数据删除技术的设计与实现[D];国防科学技术大学;2015年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026