云存储技术在网络安全设备联动系统中的研究与应用

发布时间：2017-04-26 18:18

  本文关键词：云存储技术在网络安全设备联动系统中的研究与应用，，由笔耕文化传播整理发布。

【摘要】：随着数据存储的高速增长,传统的数据库已经无法满足人们处理大规模数据的需求,有关海量数据的处理与存储成为当前的研究热点。Hadoop文件系统HDFS成为研究云存储应用的参考模型。但现有的HDFS架构对小文件的存储支持不足,而且默认的副本放置策略会影响存储性能。本文深入研究了HDFS的副本放置策略以及小文件存储问题。本文从课题的研究背景和意义出发,分析了云存储系统及联动系统的研究现状,明确了云存储对于网络安全设备联动系统日志文件存储的必要性和现实意义。主要解决了以下两个问题:第一,改进了HDFS中的默认副本放置策略,采用基于信息熵的TOPSIS多属性决策方法,为数据块的副本选择数据节点,利用具体实例对改进方案进行了验证,实验表明改进方案提高了系统的整体性能;第二,优化了小文件存储方案,对整个优化方案进行了设计,包括数据预存储节点的设计,小文件合并算法的设计,小文件索引结构的设计,小文件合并过程的设计,并通过实验进行了验证,实验表明在存储海量小文件时,小文件的存储优化方案提高了整个系统的存储性能。本文将改进的方案应用到网络安全设备联动系统中,设计并实现了基于网络安全设备联动日志的云存储系统。对系统的总体构架及设计思路进行了概述。阐述了各功能模块的设计理念及主要功能实现并对系统运行结果进行了分析评价。
【关键词】：联动 云存储 HDFS 小文件 副本放置
【学位授予单位】：华北电力大学
【学位级别】：硕士
【学位授予年份】：2015
【分类号】：TP333;TP393.08
【目录】：

• 摘要5-6
• Abstract6-9
• 第1章 绪论9-13
• 1.1 课题研究背景及意义9-10
• 1.2 国内外研究现状10-11
• 1.2.1 联动系统的国内外研究现状10
• 1.2.2 云存储技术的国内外研究现状10-11
• 1.3 课题研究的主要内容11-12
• 1.4 本文的组织结构12-13
• 第2章 网络安全设备联动系统及云存储技术分析13-21
• 2.1 网络安全设备联动系统简介13-14
• 2.2 云存储概述14-15
• 2.2.1 云存储的概念14
• 2.2.2 云存储的结构模型14-15
• 2.3 HDFS的基本概念15-19
• 2.3.1 数据块和HDFS节点15-17
• 2.3.2 数据流17-19
• 2.4 Hadoop在处理小文件中存在的问题19-20
• 2.5 副本技术20
• 2.6 本章小结20-21
• 第3章 云存储中数据块副本放置策略的改进21-32
• 3.1 HDFS默认副本放置策略21-23
• 3.2 利用多属性决策方法对默认副本放置策略进行改进23-27
• 3.3 实验验证与结果分析27-31
• 3.3.1 评价指标的确定27-28
• 3.3.2 实验验证28-30
• 3.3.3 实验结果分析30-31
• 3.4 本章小结31-32
• 第4章 云存储中小文件存储优化方案研究32-39
• 4.1 整体方案优化设计32-34
• 4.2 小文件存储优化方案34-37
• 4.2.1 数据预存储节点功能设计34
• 4.2.2 小文件合并算法设计34-36
• 4.2.3 小文件索引结构的设计36-37
• 4.2.4 小文件合并过程的整体设计37
• 4.3 优化方案效果评价37-38
• 4.4 本章小结38-39
• 第5章 云存储技术在网络安全设备联动系统中的应用39-46
• 5.1 系统总体结构39-40
• 5.2 系统详细设计40-41
• 5.2.1 数据库设计40-41
• 5.2.2 功能模块设计41
• 5.3 系统运行环境41-43
• 5.3.1 系统硬件环境41
• 5.3.2 系统软件环境41-43
• 5.4 系统主要功能实现43-45
• 5.5 本章小结45-46
• 第6章 结论与展望46-48
• 6.1 结论46
• 6.2 展望46-48
• 参考文献48-51
• 攻读硕士学位期间发表的学术论文及其它成果51-52
• 致谢52

【相似文献】

中国期刊全文数据库 前10条

1 杜皎;李国辉;冯登国;;用错误围堵策略建立可生存的网络安全设备内核[J];国防科技大学学报;2005年06期

2 ;网络安全设备市场回顾与展望[J];电子商务;2008年04期

3 杨志延;;安全走向简单[J];软件世界;2007年10期

4 张勇;;基于异构网络安全设备的管理平台构建[J];信息安全与技术;2012年11期

5 田文英;王丽华;;关于网络安全设备联动的研究[J];大家;2012年18期

6 杜皎,冯登国,李国辉;打造高效稳固的网络安全设备内核[J];计算机工程与应用;2004年34期

7 刘鹏;马琳;廉新科;;网络安全设备的统一管理方法研究[J];信息安全与通信保密;2010年07期

8 杜皎,冯登国;打造高效稳固的网络安全设备内核[J];信息网络安全;2005年04期

9 叶茴;;“万能”的防火墙——论防火墙的优点和不足[J];科技信息;2009年01期

10 许浩;许卫中;高东怀;靳豪杰;张军超;;异构网络安全设备统一管理平台研究与构建[J];科学技术与工程;2012年01期

中国重要会议论文全文数据库 前1条

1 杜皎;冯登国;李国辉;;打造高效稳固的网络安全设备内核[A];第十九次全国计算机安全学术交流会论文集[C];2004年

中国重要报纸全文数据库 前10条

1 陈荣富邋陈宏;网络安全设备在福建遭冷遇[N];中国税务报;2007年

2 陈宏;“立竿”不能“见影”,网络安全设备在福建遇冷[N];海峡财经导报;2007年

3 赛迪顾问通信产业研究中心咨询师 张泽斌;多层次自动防御引爆角逐[N];通信产业报;2008年

4 《网络世界》记者 岑义涛;依托大数据 云监测让企业更安全[N];网络世界;2013年

5 许晓耕;三季度销售额同比增长25.1%[N];中国经济导报;2007年

6 伍艳;借采购东风 练企业内功[N];中国财经报;2004年

7 电脑商报记者 刘一冰;2010年的增长点在哪里？[N];电脑商报;2009年

8 电脑商报记者 张戈;WatchGuard CEO来华推荐XTM[N];电脑商报;2008年

9 本报记者 刘兵;网络安全设备采购的三大误区[N];计算机世界;2002年

10 陈长松;防火墙必须使用安全的身份认证[N];中国计算机报;2003年

中国硕士学位论文全文数据库 前10条

1 王金华;云存储技术在网络安全设备联动系统中的研究与应用[D];华北电力大学;2015年

2 郭云龙;基于状态迁移的网络安全设备联动策略研究[D];华北电力大学;2015年

3 冯理达;数据融合技术在网络安全设备联动系统中的应用[D];华北电力大学;2015年

4 李红宇;基于内容检查的网络安全设备模拟测试软件的设计与实现[D];国防科学技术大学;2008年

5 刘惠;网络安全设备联动系统日志预处理的研究与设计[D];华北电力大学;2014年

6 冯志伟;网络安全设备联动策略的研究与应用[D];华北电力大学;2014年

7 郭庆;基于P4080构建网络安全设备平台[D];电子科技大学;2013年

8 王新华;大规模网络安全设备的动态集中策略管理[D];中国科学院研究生院（计算技术研究所）;2005年

9 曹利蒲;网络安全设备联动系统中事件关联模型的研究与应用[D];华北电力大学;2014年

10 李桐;IPsec VPN和SSL VPN的研究与实现[D];山东大学;2005年

  本文关键词：云存储技术在网络安全设备联动系统中的研究与应用，由笔耕文化传播整理发布。

本文编号：328995