云计算环境下的海量数据低负荷存储方法研究
发布时间:2020-05-03 20:09
【摘要】:云计算环境下海量数据存储系统中,大量的冗余数据通过高维特征量的形式集成在存储空间中,带来了高额的存储负荷开销,需要进行海量数据的低负荷存储方法设计。传统方法采用云计算数据存储分块解压算法实现对海量数据的低负荷存储,算法需要对数据进行前期分类处理,增大了计算的复杂度,对动态副本数据存储开销较大。提出一种Dopplerlet自适应匹配塔形分解和K-L特征压缩的云计算海量数据低负荷存储算法。结合Dopplerlet变换在寻找最佳基函数的全局优化性,进行云存储海量数据的信息特征提取和冗余信息过滤预处理,对海量数据进行Dopplerlet自适应匹配塔形分解,得到海量数据的离散样本频谱特征,采用K-L特征压缩进行云计算环境下的数据存储减负荷处理,实现算法改进。仿真结果表明,采用改进算法能有效提高云计算环境下海量数据存储的容量,降低了数据存储执行开销和负荷程度。
【图文】:
邋-r—-——?—逦越,展示了较好的应用价值。逡逑s:=^=逦参考文献:逡逑0.3°4-逦逦??_?????j逦1??…???_?逦[l]高志春,等.倾斜因子k均值优化数据聚类及故障诊断研究逡逑°-2?5邋逦逦25逦.5逦k逦i逦[J].计算机与数字工程,2014,42(1)邋:14-18.逡逑时间中心/s逦时间中心/s逡逑[2邋]邋Cao邋Jun邋-邋wei,邋Li邋Ke邋-邋qin邋and邋I邋Stojmenovic.邋Optimal邋power邋allo-逡逑图2不同时宽皂下海量数据Dopplerlet自适应匹配逦,.逡逑cation邋and邋load邋distribution邋lor邋multiple邋heterogeneous邋multi邋-邋core逡逑塔形分解特征取结果逦server邋processors邋across邋clouds邋and邋data邋centers[邋J].邋IEEE邋Trans?逡逑actions邋on邋Computers,邋2014,63(1)邋:45邋-58.逡逑由图可以看出,随着时宽4,的增大,通过本文提出的[3]田刚,等.面向领域标签辅助的服务聚类方法[J].电子学报,逡逑Dopplerlet自适应匹配塔形分解方法,在海量数据云存储节逦20丨5邋,43(7):邋1266邋-邋1274.逡逑点为在20邋s处出现了归一化投影值的峰值,以此为特征量,[4]吴涛,陈黎飞,郭躬德.优化子空间的高维聚类算法[J].计算逡逑采用K-L特征压缩器进行特征压缩,实现低负荷存储,得到逦机应用,2014,34(8):邋2279邋-2284.逡逑采用本文算法和传统方法下的存储负荷开销对
邋-r—-——?—逦越,展示了较好的应用价值。逡逑s:=^=逦参考文献:逡逑0.3°4-逦逦??_?????j逦1??…???_?逦[l]高志春,,等.倾斜因子k均值优化数据聚类及故障诊断研究逡逑°-2?5邋逦逦25逦.5逦k逦i逦[J].计算机与数字工程,2014,42(1)邋:14-18.逡逑时间中心/s逦时间中心/s逡逑[2邋]邋Cao邋Jun邋-邋wei,邋Li邋Ke邋-邋qin邋and邋I邋Stojmenovic.邋Optimal邋power邋allo-逡逑图2不同时宽皂下海量数据Dopplerlet自适应匹配逦,.逡逑cation邋and邋load邋distribution邋lor邋multiple邋heterogeneous邋multi邋-邋core逡逑塔形分解特征取结果逦server邋processors邋across邋clouds邋and邋data邋centers[邋J].邋IEEE邋Trans?逡逑actions邋on邋Computers,邋2014,63(1)邋:45邋-58.逡逑由图可以看出,随着时宽4,的增大,通过本文提出的[3]田刚,等.面向领域标签辅助的服务聚类方法[J].电子学报,逡逑Dopplerlet自适应匹配塔形分解方法,在海量数据云存储节逦20丨5邋,43(7):邋1266邋-邋1274.逡逑点为在20邋s处出现了归一化投影值的峰值,以此为特征量,[4]吴涛,陈黎飞,郭躬德.优化子空间的高维聚类算法[J].计算逡逑采用K-L特征压缩器进行特征压缩,实现低负荷存储,得到逦机应用,2014,34(8):邋2279邋-2284.逡逑采用本文算法和传统方法下的存储负荷开销对
本文编号:2648055
【图文】:
邋-r—-——?—逦越,展示了较好的应用价值。逡逑s:=^=逦参考文献:逡逑0.3°4-逦逦??_?????j逦1??…???_?逦[l]高志春,等.倾斜因子k均值优化数据聚类及故障诊断研究逡逑°-2?5邋逦逦25逦.5逦k逦i逦[J].计算机与数字工程,2014,42(1)邋:14-18.逡逑时间中心/s逦时间中心/s逡逑[2邋]邋Cao邋Jun邋-邋wei,邋Li邋Ke邋-邋qin邋and邋I邋Stojmenovic.邋Optimal邋power邋allo-逡逑图2不同时宽皂下海量数据Dopplerlet自适应匹配逦,.逡逑cation邋and邋load邋distribution邋lor邋multiple邋heterogeneous邋multi邋-邋core逡逑塔形分解特征取结果逦server邋processors邋across邋clouds邋and邋data邋centers[邋J].邋IEEE邋Trans?逡逑actions邋on邋Computers,邋2014,63(1)邋:45邋-58.逡逑由图可以看出,随着时宽4,的增大,通过本文提出的[3]田刚,等.面向领域标签辅助的服务聚类方法[J].电子学报,逡逑Dopplerlet自适应匹配塔形分解方法,在海量数据云存储节逦20丨5邋,43(7):邋1266邋-邋1274.逡逑点为在20邋s处出现了归一化投影值的峰值,以此为特征量,[4]吴涛,陈黎飞,郭躬德.优化子空间的高维聚类算法[J].计算逡逑采用K-L特征压缩器进行特征压缩,实现低负荷存储,得到逦机应用,2014,34(8):邋2279邋-2284.逡逑采用本文算法和传统方法下的存储负荷开销对
邋-r—-——?—逦越,展示了较好的应用价值。逡逑s:=^=逦参考文献:逡逑0.3°4-逦逦??_?????j逦1??…???_?逦[l]高志春,,等.倾斜因子k均值优化数据聚类及故障诊断研究逡逑°-2?5邋逦逦25逦.5逦k逦i逦[J].计算机与数字工程,2014,42(1)邋:14-18.逡逑时间中心/s逦时间中心/s逡逑[2邋]邋Cao邋Jun邋-邋wei,邋Li邋Ke邋-邋qin邋and邋I邋Stojmenovic.邋Optimal邋power邋allo-逡逑图2不同时宽皂下海量数据Dopplerlet自适应匹配逦,.逡逑cation邋and邋load邋distribution邋lor邋multiple邋heterogeneous邋multi邋-邋core逡逑塔形分解特征取结果逦server邋processors邋across邋clouds邋and邋data邋centers[邋J].邋IEEE邋Trans?逡逑actions邋on邋Computers,邋2014,63(1)邋:45邋-58.逡逑由图可以看出,随着时宽4,的增大,通过本文提出的[3]田刚,等.面向领域标签辅助的服务聚类方法[J].电子学报,逡逑Dopplerlet自适应匹配塔形分解方法,在海量数据云存储节逦20丨5邋,43(7):邋1266邋-邋1274.逡逑点为在20邋s处出现了归一化投影值的峰值,以此为特征量,[4]吴涛,陈黎飞,郭躬德.优化子空间的高维聚类算法[J].计算逡逑采用K-L特征压缩器进行特征压缩,实现低负荷存储,得到逦机应用,2014,34(8):邋2279邋-2284.逡逑采用本文算法和传统方法下的存储负荷开销对
【相似文献】
相关期刊论文 前9条
1 苏建红;;关于信息存储方法的初探——几种证书存储方法的比较[J];科技信息;2009年17期
2 胡永旭;离子束刻书技术[J];世界科学;1996年02期
3 樊莉,陈林森;一种利用光变图像光刻系统的存储方法[J];激光与红外;2003年04期
4 徐乐;解玉凤;林殷茵;;2B2R结构下高可靠性多值存储方法[J];复旦学报(自然科学版);2010年02期
5 朱晓丽;;基于Hadoop的远程教育海量资源存储方法研究[J];山东广播电视大学学报;2012年03期
6 霍宏;孟繁汀;;Honeywell PHD数据压缩存储方法及应用[J];信息系统工程;2013年09期
7 靳鸿;陈昌鑫;史晓军;;具有负延迟的分区域数据存储方法[J];探测与控制学报;2013年02期
8 晓月;;MD简介[J];记录媒体技术;2004年02期
9 ;[J];;年期
相关博士学位论文 前1条
1 李恩有;高性能计算机的存储方法研究[D];中国科学院研究生院(计算技术研究所);1997年
本文编号:2648055
本文链接:https://www.wllwen.com/kejilunwen/jisuanjikexuelunwen/2648055.html