当前位置:主页 > 科技论文 > 计算机论文 >

基于分片聚合编码的云存储策略的研究

发布时间:2019-12-06 15:27
【摘要】:针对HDFS采用的完全复制存储方案会占据较多的存储空间,且对数据的恶意窃取和攻击缺少防御措施,提出了基于分片聚合编码的HDFS数据存储策略,其中采用STAR码对数据进行编码处理,产生编码数据片,然后通过聚合操作将每个数据段中位置相同的数据片聚合组成一个存储数据块,实现了HDFS文件的存储.模拟实验表明基于分片聚合编码的文件存储策略相比原HDFS存储方案在数据分布方面更安全有效.

【参考文献】

相关期刊论文 前2条

1 王意洁;孙伟东;周松;裴晓强;李小勇;;云计算环境下的分布存储关键技术[J];软件学报;2012年04期

2 余林琛;章巍;林强;许杰星;钟贝;;RS纠删码在云存储中的应用[J];微电子学与计算机;2011年08期

【共引文献】

相关期刊论文 前10条

1 钟德荣;蒋园园;张恺乐;王智泉;;基于云计算的全球眼视频监控系统的设计与实现[J];计算机光盘软件与应用;2012年20期

2 宋秀丽;陈龙;肖敏;;云存储中支持XOR旋转编码的可恢复性验证方案[J];重庆邮电大学学报(自然科学版);2012年06期

3 王永;李敏;张勤;;云计算模式下合同协同拟定模型研究[J];重庆邮电大学学报(自然科学版);2012年06期

4 陈崇成;林剑峰;吴小竹;巫建伟;连惠群;;基于NoSQL的海量空间数据云存储与服务方法[J];地球信息科学学报;2013年02期

5 饶庆云;丁晶晶;苏乐乐;谷永权;夏良晖;胡中南;;基于云计算的分布式切图服务设计与实现[J];测绘与空间地理信息;2013年S1期

6 范真荣;;基于云计算的企业XBRL跨平台协同管理研究[J];财会通讯;2013年25期

7 郭翠云;;云计算环境下的分布存储关键技术分析[J];硅谷;2013年16期

8 万武南;王拓;索望;;一种三容错数据布局[J];电子与信息学报;2013年10期

9 陶卫东;;“警务云”模式与网络安全决策支持系统[J];辽宁警专学报;2013年02期

10 王丽;林恩爱;王欣;;自动精简配置存储技术在民航信息系统中的应用[J];计算机与现代化;2013年03期

相关会议论文 前2条

1 司炜;;IT支撑系统云计算资源池实现研究[A];2013年中国通信学会信息通信网络技术委员会年会论文集[C];2013年

2 陈玉龙;王丹平;方晓群;;工业视频监控系统在丰山铜矿的应用和发展[A];第三届全国数字矿山高新技术成果交流会论文集[C];2014年

相关博士学位论文 前5条

1 陈震;黑龙江省森工林区“智慧林业”框架应用技术研究[D];东北林业大学;2012年

2 肖宜龙;随机化数据冗余方法及其在存储系统中的应用[D];电子科技大学;2013年

3 蒋海波;海量数据存储系统的高可靠性关键技术研究与应用[D];电子科技大学;2013年

4 黄震;大规模分布式存储系统中数据冗余技术研究[D];国防科学技术大学;2012年

5 夏纯中;云存储多数据中心QoS保障机制研究[D];江苏大学;2014年

相关硕士学位论文 前10条

1 魏伟;一种基于laaS的模式的管理系统的设计与实现[D];复旦大学;2012年

2 孙春菊;云环境下数据模型和索引技术研究[D];南京邮电大学;2013年

3 田怡萌;BlueOcean海量存储系统Windows客户端设计与实现[D];上海交通大学;2013年

4 方旋;云计算在土地利用规划信息系统中的应用研究[D];浙江大学;2013年

5 田晓艳;云环境下高考视频监控数据管理技术研究[D];山东师范大学;2013年

6 吴永发;面向终端应用的云存储系统研究与设计[D];广东工业大学;2013年

7 谌侃;用户数据融合云计算存储方案研究[D];北京邮电大学;2013年

8 许维龙;基于HDFS的数据备份系统的分析与设计[D];北京邮电大学;2013年

9 段长强;基于PaaS云服务的移动互联网应用程序设计与实现[D];北京邮电大学;2013年

10 赵晓冰;Hadoop平台下的作业调度算法的研究[D];郑州大学;2013年

【二级参考文献】

相关期刊论文 前1条

1 陈康;郑纬民;;云计算:系统实例与研究现状[J];软件学报;2009年05期

【相似文献】

相关期刊论文 前10条

1 王朝阳;互联网图像格式的第三把剑PNG[J];电子出版;2002年08期

2 张晓林;文献信息系统实现联想式检索的技术与方法[J];情报学报;1994年05期

3 林铁生,富致超;在EPROM上固化函数数据的方法[J];电测与仪表;1990年12期

4 王旭,,桂业英;.FLI文件格式及应用[J];计算机应用研究;1994年06期

5 扬帆;驾驭MS-Windows图像文件(四)[J];电脑爱好者;1997年10期

6 ;TEMS INVESTIGATION功能介绍及使用技巧(四)[J];通讯世界;2003年12期

7 符光宝;Oracle developer2000应用技巧[J];华南热带农业大学学报;2002年04期

8 ;330bit多功能非接触式辩识器件T5557[J];金卡工程;2004年03期

9 ;服务器的存储技术[J];互联网周刊;2000年29期

10 邵新;张阳;郑萍;;Oracle中数据文件坏块的验证与处理[J];医疗卫生装备;2010年09期

相关会议论文 前10条

1 朱旭东;柯剑;那文武;许鲁;;一种数据块关系指导的缓存替换方法[A];第15届全国信息存储技术学术会议论文集[C];2008年

2 李明;王林旭;谢剑薇;李东岳;;大规模地理数据的组织存储及快速访问[A];2010年全国通信安全学术会议论文集[C];2010年

3 崔铁军;张利;;多尺度海量栅格数据索引机制的研究[A];中国地理信息系统协会第八届年会论文集[C];2004年

4 张兵;;Oracle Forms表格数据转存为Excel文件的技巧研究[A];全国冶金自动化信息网2009年会论文集[C];2009年

5 郑霄;陈红;杜晓勇;王珊;;基于语义数据块的两层缓存技术在并行数据仓库系统ParaWare中的实现[A];第十八届全国数据库学术会议论文集(研究报告篇)[C];2001年

6 杨启军;;邯钢冷轧厂酸轧生产线的S7-COM通信[A];冶金轧制过程自动化技术交流会论文集[C];2005年

7 王国松;周建强;程利平;张跃龙;;基于BLOB存取的大坝监测电子文档管理系统[A];全国大坝安全监测技术信息网2008年度技术信息交流会暨全国大坝安全监测技术应用和发展研讨会论文集[C];2008年

8 魏春城;;流媒体服务器设计中关键技术分析[A];第六届全国计算机应用联合学术会议论文集[C];2002年

9 白冰;王宝生;陈琳;劳仲安;;一种前向纠错编解码的带宽优化方法[A];中国电子学会第十六届信息论学术年会论文集[C];2009年

10 蔡平;;磁盘阵列的数据安全隐患与数据修复[A];第二十一次全国计算机安全学术交流会论文集[C];2006年

相关重要报纸文章 前10条

1 匡红庆 周朝晖;软件项目管理的质量保证[N];人民政协报;2005年

2 计算机世界实验室 韩勖;中小企业存储之道[N];计算机世界;2007年

3 ;“不联网搜索”新概念[N];网络世界;2006年

4 美国飞康软件公司中国区技术总监 颜军;飞康:单实例存储实现快速恢复[N];中国计算机报;2007年

5 汉帆(杭州)信息技术有限公司 杨洋;数据缩减:减少归档数据量[N];中国计算机报;2008年

6 李宏;存储与交换融合[N];中国计算机报;2001年

7 罗庆超;VxFS中的检查点和快照技术[N];中国计算机报;2007年

8 昆腾公司;提供灾难恢复保护的远程复制[N];中国计算机报;2007年

9 中国传媒大学计算机学院 朱立谷;重复数据删除技术解析[N];中国计算机报;2007年

10 本报记者 张群英;左手,右手[N];网络世界;2005年

相关博士学位论文 前10条

1 黄震;大规模分布式存储系统中数据冗余技术研究[D];国防科学技术大学;2012年

2 赵鑫;P2P流媒体内容分发的关键技术研究[D];北京邮电大学;2010年

3 欧阳一鸣;片上网络测试关键问题研究[D];合肥工业大学;2013年

4 涂旭平;对等流媒体直播系统带宽资源优化研究[D];华中科技大学;2008年

5 马冠骏;基于网络编码的P2P文件分发的研究[D];中国科学技术大学;2009年

6 张慧杰;面向大数据集的地形模型多分辨率建模关键技术研究[D];吉林大学;2009年

7 徐奎;无线网络下的网络编码技术研究[D];华中科技大学;2009年

8 王见;异构节点的媒体分发系统研究[D];上海交通大学;2009年

9 王洪体;数字地震仪网络化与智能化技术研究[D];中国地震局地球物理研究所;2006年

10 杜晔华;嵌入式系统中闪速存储器系统的若干节能技术研究[D];浙江大学;2007年

相关硕士学位论文 前10条

1 冯本明;云存储中数据块资源分布及服务器效能优化问题研究[D];湖南大学;2011年

2 王s

本文编号:2570431


论文下载
论文发表

本文链接:http://www.bigengculture.com/kejilunwen/jisuanjikexuelunwen/2570431.html

分享