基于数据分类存储的云存储系统节能算法

发布时间：2018-03-14 09:15

  本文选题：云存储　切入点：MapReduce　出处：《计算机应用》2014年08期 　论文类型：期刊论文

【摘要】：云存储规模的不断扩大以及设计时对能耗因素的忽略使其日益暴露出高能耗低效率的问题,并且此问题已经成为制约云计算与大数据快速发展的一个主要瓶颈。已有研究大多采用将整个存储节点调整到低能耗模式以达到节能的目的。根据数据的重复性及访问规律,设计了基于数据分类的存储模型,将存储区域划分为热数据块区、冷数据块区与重复文件区,根据不同数据的重复性及活动因子特点进行分区存储。围绕新的存储模型,设计了适应节能的数据存储算法并建立了能耗模型。实验结果表明:当系统负载小于设定阈值时,新的存储模型能够提高存储系统25%左右的能耗利用率。
[Abstract]:The increasing scale of cloud storage and the neglect of energy consumption in design make it more and more exposed the problem of high energy consumption and low efficiency. And this problem has become a major bottleneck restricting the rapid development of cloud computing and big data. Most of the previous studies have adopted adjusting the entire storage node to low energy consumption mode to achieve the purpose of energy saving. The storage model based on data classification is designed. The storage area is divided into hot data block, cold data block and repeated file area. According to the characteristics of different data repeatability and activity factors, the storage area is partitioned. A data storage algorithm adapted to energy saving is designed and an energy consumption model is established. The experimental results show that the new storage model can improve the energy consumption utilization of the storage system about 25% when the system load is less than the set threshold.
【作者单位】： 新疆医科大学医学工程技术学院;新疆财经大学统计与信息学院;新疆大学软件学院;
【基金】：国家自然科学基金资助项目(61262088) 新疆大学博士启动基金资助项目(BS120134)
【分类号】：TP333

【相似文献】

相关期刊论文 前10条

1 张询;速度快容量大的新型存储系统[J];世界电子元器件;1997年09期

2 李静;;浅谈HIS系统对服务器和存储设备的要求及设计方案[J];信息与电脑(理论版);2009年11期

3 刘刚;张海涛;李瑞东;张强;;一种基于模块化设计的NAS集群存储系统[J];微计算机信息;2011年05期

4 于耳;;建立面向应用的存储系统[J];中国教育网络;2011年06期

5 赵晨;;EMC Symmetrix优化SAP R/3系统[J];计算机与网络;1998年09期

6 陈翔,张江陵;网络逻辑存储系统研究[J];小型微型计算机系统;1999年11期

7 马天蔚;;存储:存出巨无霸[J];每周电脑报;2001年54期

8 ;松下半导体存储系统DVCPRO P2[J];中国电化教育;2004年06期

9 李建;;存储器系统浅析[J];中国科技信息;2006年01期

10 ;存储天地[J];每周电脑报;2006年31期

相关会议论文 前10条

1 赵志刚;;存储系统在企业信息化中的应用[A];2005年安徽通信论文集[C];2006年

2 朱平;朱建涛;高剑刚;蒋金虎;;高性能计算存储关键技术研究[A];2010年第16届全国信息存储技术大会（IST2010）论文集[C];2010年

3 周功业;周江;陈希;陈进才;;寄生存储原理及实现机制[A];第15届全国信息存储技术学术会议论文集[C];2008年

4 聂明;;构建海量存储系统 提升媒体竞争力[A];中国新闻技术工作者联合会2008年学术年会论文集（下）[C];2008年

5 黄晓峰;张杰;;矿井信息中心存储系统设计[A];安全高效矿井机电装备及信息化技术——陕西省煤炭学会学术年会论文集（2011）[C];2011年

6 罗香玉;李传佑;汪芸;;纠删码容错组的布局策略研究[A];第18届全国多媒体学术会议（NCMT2009）、第5届全国人机交互学术会议（CHCI2009）、第5届全国普适计算学术会议（PCC2009）论文集[C];2009年

7 胡维;刘光明;李琼;刘欣;;基于智能预警的自恢复存储系统研究[A];2010年第16届全国信息存储技术大会（IST2010）论文集[C];2010年

8 汪位龙;;设计院存储系统建设初探[A];中国公路学会计算机应用分会2004年年会学术论文集[C];2004年

9 程鹏;刘伟;;电力SCADA系统运行平台的存储系统设计[A];2010年第16届全国信息存储技术大会（IST2010）论文集[C];2010年

10 蒋澄瑛;;如何构建一个实用的网络存储系统[A];中国造船工程学会’04 MIS/S&A学术交流会学术论文集[C];2004年

相关重要报纸文章 前10条

1 郭涛;MediaGrid既不是SAN也不是NAS[N];中国计算机报;2007年

2 Hifn(汉帆)杭州信息技术有限公司 马剑杰;自动精简配置：提升存储利用率有绝招[N];中国计算机报;2009年

3 ;IBM收购存储解决方案公司[N];计算机世界;2007年

4 ;戴尔EMC打造新一代高容量存储系统[N];人民邮电;2004年

5 阮征;三招降低企业存储成本[N];电脑报;2009年

6 赛迪评测硬件与网络实验室 赵志宇;Dell PowerVault MD1000存储系统实测[N];中国计算机报;2006年

7 ;存储系统使用率备受关注[N];计算机世界;2008年

8 郭涛;Sun Storage 7000系列统一存储系统[N];中国计算机报;2008年

9 本报记者 李献;存储未来是系统[N];计算机世界;2004年

10 本报记者 邱江勇;谋求话语权 中国存储从标准开始[N];中国电子报;2009年

相关博士学位论文 前10条

1 陆承涛;存储系统性能管理问题的研究[D];华中科技大学;2010年

2 聂雪军;内容感知存储系统中信息信息生命周期管理关键技术研究[D];华中科技大学;2011年

3 罗东健;大规模存储系统高可靠性关键技术研究[D];华中科技大学;2011年

4 聂雪军;内容感知存储系统中信息生命周期管理关键技术研究[D];华中科技大学;2010年

5 王玉林;多节点容错存储系统的数据与缓存组织研究[D];电子科技大学;2010年

6 王鹏;低密度奇偶校验码应用于存储系统的关键技术研究[D];华中科技大学;2013年

7 施展;基于本体的存储系统管理研究[D];华中科技大学;2011年

8 黄继鹏;高速高可靠小型数字视频存储系统的设计与实现[D];中国科学院研究生院（长春光学精密机械与物理研究所）;2012年

9 姜明华;基于冗余智能存储通道的存储系统关键技术研究[D];华中科技大学;2011年

10 刁莹;用数学建模方法评价存储系统性能[D];哈尔滨工程大学;2013年

相关硕士学位论文 前10条

1 陆正武;面向流媒体应用存储系统的研究与实现[D];华中科技大学;2004年

2 杜睿;基于IP-SAN技术的石化企业数据集中存储系统的设计与实现[D];华东理工大学;2010年

3 金强;基于HBase的RDF存储系统的研究与设计[D];浙江大学;2011年

4 余智敏;数字化图书馆的数据存储技术的研究[D];武汉理工大学;2006年

5 陶博舟;磁盘阵列快照系统的设计与实现[D];华中科技大学;2007年

6 张小艳;基于嵌入式技术的USB存储系统的设计与实现[D];内蒙古大学;2011年

7 蒋亚群;基于DLX体系结构的微处理器核的设计与实现[D];中国人民解放军国防科学技术大学;2002年

8 袁晓铭;磁盘阵列系统的快照技术研究[D];华中科技大学;2007年

9 许伟民;非编网存储系统规划与分析[D];厦门大学;2008年

10 徐文强;基于HDFS的云存储系统研究[D];上海交通大学;2011年

，

本文编号：1610561