企业内部分布式存储高效扩展机制研究

发布时间：2018-01-24 03:29

  本文关键词： 高效扩展性 分布式存储 随机副本 零等待时间　出处：《计算机工程与科学》2015年04期 　论文类型：期刊论文

【摘要】：在研究文件存储基础设备与技术发展的基础上,提出一种可高效扩展的分布式存储机制,将企业中已有的服务器和存储设备作为分布式存储的存储单元,将文件作为存储对象,建立一种高效率甚至是零等待时间的可以随时扩展或减少存储单元的分布式存储机制。企业中存在的服务器和存储设备较多时,利用该分布式存储机制后存储性能会得到较大的提升,管理人员文件管理的劳动强度将大大降低。重点是能够帮助企业充分利用原有的服务器和存储设备,减少更新换代的一次性大量投入。
[Abstract]:Based on the research of file storage infrastructure and technology development, this paper proposes an efficient and extensible distributed storage mechanism, which takes the existing servers and storage devices as distributed storage units. Take the file as the storage object, establish a high efficiency or even zero wait time distributed storage mechanism that can extend or reduce the storage unit at any time.When there are more servers and storage devices in the enterprise. After using the distributed storage mechanism, the storage performance will be greatly improved, and the labor intensity of file management will be greatly reduced. The emphasis is to help enterprises make full use of the original servers and storage devices. Reduce the replacement of a large amount of one-time investment.
【作者单位】： 攀钢集团研究院有限公司信息研究所;
【分类号】：TP333
【正文快照】： 1引言信息技术经过多年的发展,“大数据”成为现在一个较热的名词,大数据的特征是数据体量巨大(Volume)、数据种类繁多(Variety)、流动速度快(Velocity)、价值密度低(Value),大数据的“4V”特征表明其不仅仅是数据海量,对于大数据的存储和分析将更加复杂,更追求速度,更注重实

【参考文献】

相关期刊论文 前7条

1 伍文静;程耀东;汪璐;武杰;陈刚;;面向本地分布式存储系统的动态副本策略[J];计算机工程与应用;2010年12期

2 谢华成;陈向东;;面向云存储的非结构化数据存取[J];计算机应用;2012年07期

3 黄秋兰;程耀东;陈刚;;分布式存储系统的哈希算法研究[J];计算机工程与应用;2014年01期

4 熊安萍;刘进进;邹洋;;基于对象存储的负载均衡存储策略[J];计算机工程与设计;2012年07期

5 秦秀磊;张文博;魏峻;王伟;钟华;黄涛;;云计算环境下分布式缓存技术的现状与挑战[J];软件学报;2013年01期

6 徐小龙;邹勤文;杨庚;;分布式存储系统中数据副本管理机制[J];计算机技术与发展;2013年02期

7 陶雪娇;胡晓峰;刘洋;;大数据研究综述[J];系统仿真学报;2013年S1期

相关博士学位论文 前5条

1 宋玮;分布式存储系统中的节点自主性问题研究[D];华南理工大学;2010年

2 李冰;云计算环境下动态资源管理关键技术研究[D];北京邮电大学;2012年

3 魏建生;高性能重复数据检测与删除技术研究[D];华中科技大学;2012年

4 张小庆;基于云计算环境的资源提供优化方法研究[D];武汉理工大学;2013年

5 赵浩天;基于网络编码的分布式存储容错及扩容问题研究[D];中国科学技术大学;2013年

【共引文献】

相关期刊论文 前10条

1 宋亚奇;周国亮;朱永利;;智能电网大数据处理技术现状与挑战[J];电网技术;2013年04期

2 吉慧;;云存储产品性能测试方法研究[J];电信技术;2013年07期

3 厉剑;张绍雄;刘俊杰;李成柱;;大数据引发信息时代新变革[J];大众科技;2013年12期

4 王妍;柴剑平;;大数据及相关技术解读[J];广播电视信息;2014年02期

5 罗兴宇;;浅析云计算数据中心的资源管理[J];计算机光盘软件与应用;2014年05期

6 曲朝阳;刁赢龙;薄小永;朱莉;任有学;颜佳;;基于多预测树组合算法的电力信息系统数据库缓存模型[J];电测与仪表;2014年06期

7 刘琼;赵荣;孙立坚;;Map/Reduce框架下的粗糙集空间数据挖掘改进算法[J];测绘科学;2014年05期

8 汤莉;;镜像缓存系统对运营商的价值研究[J];电子技术与软件工程;2014年11期

9 万辉;;大数据在高校学生管理工作中的应用[J];高校辅导员学刊;2014年04期

10 马景艳;;大数据背景下智慧城市破解交通拥堵的策略研究[J];电脑知识与技术;2014年18期

相关会议论文 前4条

1 员建厦;彭会湘;;大数据处理在省级应急平台中的应用[A];2014第二届中国指挥控制大会论文集（下）[C];2014年

2 周引;王元;王晓霞;李小丽;;大数据时代科技期刊受众行为分析[A];第十二届2014全国核心期刊与期刊国际化、网络化研讨会论文集[C];2014年

3 王显燕;龚鹏;桑开勇;;大数据对图书馆信息服务的冲击[A];广西图书馆学会2014年年会暨第32次科学讨论会论文集[C];2014年

4 唐瑞伟;;电力大数据应用现状及发展前景[A];电力行业信息化优秀论文集2014——2014年全国电力行业两化融合推进会暨全国电力企业信息化大会获奖论文[C];2014年

相关博士学位论文 前5条

1 杨永全;饮食健康中的食物体积估算云计算技术研究[D];中国海洋大学;2013年

2 李刚;黑龙江省国土资源信息数据高效利用与服务研究[D];东北农业大学;2013年

3 付印金;面向云环境的重复数据删除关键技术研究[D];国防科学技术大学;2013年

4 王国华;高效重复数据删除技术研究[D];华南理工大学;2014年

5 章瑞;云计算服务的定价策略研究[D];东华大学;2014年

相关硕士学位论文 前10条

1 许信;云存储系统服务质量控制与可靠性技术研究[D];浙江大学;2011年

2 张建林;云存储系统高效数据传输机制的研究[D];华中科技大学;2011年

3 黄恺翔;云存储环境下副本管理策略研究[D];解放军信息工程大学;2012年

4 潘婷;基于物联网服务平台的海量传感信息Hadoop处理方法和系统设计[D];南京邮电大学;2013年

5 刘溪;对等网络下信息检索和动态副本策略的研究与实现[D];华中科技大学;2012年

6 翟易坤;一种基于云存储环境下的数据备份容错方案设计[D];吉林大学;2013年

7 钱进进;私有云安全存储技术的研究与实现[D];广东工业大学;2013年

8 吴永发;面向终端应用的云存储系统研究与设计[D];广东工业大学;2013年

9 王银芳;基于HDFS的文件传输策略的研究与实现[D];吉林大学;2013年

10 周梦雪;云计算环境下的多数据集连接优化[D];郑州大学;2013年

【二级参考文献】

相关期刊论文 前10条

1 蒋砚军;马华东;张海e，

本文编号：1459049