基于HDFS的煤炭企业云存储平台设计

发布时间：2019-04-15 17:36

【摘要】：为提高现代煤炭企业海量数据存储的效率,设计了一种基于HDFS(Hadoop Distributed File System)的煤炭企业云存储平台。该平台在分布式文件存储系统中增加小文件处理模块,可实现小文件的判断以及合并处理,并将其应用于云存储技术,以提高煤炭企业海量数据的处理效率。介绍了云存储平台文件系统HDFS的架构功能以及小文件模块的实现方案,并在此基础上重点阐述了云存储平台的基本配置和系统设计。
[Abstract]:In order to improve the efficiency of mass data storage in modern coal enterprises, a cloud storage platform of coal enterprises based on HDFS (Hadoop Distributed File System) is designed. The platform adds small file processing module to distributed file storage system, which can realize small file judgment and merge processing, and apply it to cloud storage technology, in order to improve the processing efficiency of massive data in coal enterprises. This paper introduces the architecture and function of file system HDFS of cloud storage platform and the realization scheme of small file module. On the basis of this, the basic configuration and system design of cloud storage platform are expounded emphatically.
【作者单位】： 湖南电子科技职业学院;
【分类号】：TP333

【相似文献】

相关期刊论文 前10条

1 王岩;;网络信息存储平台的开发与应用[J];网络安全技术与应用;2013年10期

2 筱月;缔造智能型网络存储平台[J];中国计算机用户;2003年28期

3 潘永东;;高校云存储平台建设的研究和规划[J];电子技术与软件工程;2013年23期

4 刘华日;陈志民;刘小波;叶志蝉;谷丰;;实验中心信息存储平台的改进与应用[J];实验室科学;2013年05期

5 ;富士通推出全新存储平台[J];互联网周刊;2006年22期

6 方延风;;提高福建省台湾文献信息中心存储平台性能的思考[J];情报探索;2010年11期

7 ;存储平台三维扩展时代到来[J];中国金融电脑;2011年05期

8 ;存储平台三维扩展时代[J];微电脑世界;2011年08期

9 ;基于HP StorageWorks的绿色存储平台[J];计算机与网络;2008年15期

10 马天蔚;;150万谁支撑——惠普为上海热线计费系统搭建存储平台[J];每周电脑报;2001年61期

相关会议论文 前5条

1 蔡灵灵;张艳萍;;新华社统一存储平台的设计与实践[A];中国新闻技术工作者联合会五届一次理事会暨学术年会论文集（上篇）[C];2009年

2 王猛;蔡灵灵;;异构存储平台统一监控的设计与实现[A];中国新闻技术工作者联合会五届一次理事会暨学术年会论文集（上篇）[C];2009年

3 郭嘉;;以云存储平台助力电力企业信息化[A];电力行业信息化优秀论文集2013[C];2013年

4 陈志文;;数据集中安全存储平台研制[A];中国工程物理研究院科技年报(2012年版)[C];2012年

5 丁嵩;田敬;陈东;吴刚;代亚非;;UPStore:一个开放的P2P存储平台[A];第15届全国信息存储技术学术会议论文集[C];2008年

相关重要报纸文章 前10条

1 綦悠悠;黑龙江联通打造网络存储平台[N];人民邮电;2007年

2 江苏省电力公司电力科学研究院 赵新冬 王勤 戴威;电力行业存储平台集中管理设计[N];中国信息化周报;2014年

3 闻风;浪潮搭建高品质存储平台[N];政府采购信息报;2005年

4 ;富士通展示最新存储平台[N];人民邮电;2007年

5 日立数据系统公司(HDS)副总裁兼首席技术官 Hubert Yoshida;大数据存储平台必须具有弹性[N];中国计算机报;2012年

6 本报记者 张广彬;存储平台 通用为王[N];计算机世界;2004年

7 本报记者 霍皓迪;建设永续运行的存储平台[N];通信产业报;2002年

8 蔡彭年;浪潮成功构建电子缴税入库存储平台[N];中国税务报;2007年

9 李佳师;微软试水存储平台[N];中国电子报;2003年

10 电脑商报记者 刘一冰;“兼”济天下 有“容”乃大[N];电脑商报;2010年

相关硕士学位论文 前10条

1 王雅山;云存储平台中加密数据的多关键字排序搜索技术研究[D];哈尔滨工业大学;2015年

2 张宇翔;指纹支付系统中海量指纹数据云存储平台的优化设计与实现[D];浙江师范大学;2015年

3 牛茜;基于HDFS的云存储平台在企业信息管理系统中的应用研究[D];西安科技大学;2015年

4 余辉;面向微博舆情的Hadoop存储平台设计与实现[D];中国科学院大学(工程管理与信息技术学院);2016年

5 刘镔莹;联通虚拟资源云存储平台设计与实现[D];电子科技大学;2016年

6 梁X;分布式教育云存储平台的设计与实现[D];华南理工大学;2016年

7 金晨;警务信息化系统中云存储平台的设计和实现[D];电子科技大学;2013年

8 郝伟;湖南移动网管集中云存储平台搭建与测试[D];中南大学;2010年

9 何颖鹏;非结构化数据统一存储平台的设计与实现[D];浙江大学;2013年

10 田原;云存储中存储平台与数据安全关键技术研究与实现[D];北京邮电大学;2015年

，

本文编号：2458342