军事训练场海量信息存储系统

发布时间：2017-07-20 19:14

  本文关键词：军事训练场海量信息存储系统

  更多相关文章： 大数据 存储 Hadoop MySQL

【摘要】：为了更加真实的刻画训练场景,军事训练评估系统产生了大量的结构化和非结构化的数据。高效的军事训练场场信息数据存储系统已经成为当前军队信息化建设面临的迫切需求。针对现有军事训练信息数据存储方式单一、使用效率低的问题,提出了一种Hadoop和MySQL相结合的高效混合存储架构以及针对不同数据采集方式的分类存储方法,对不同来源的军事训练场数据信息进行分类存储,提高了军事训练场内各类信息的存储效率。在所提出的混合存储架构中,综合考虑两种不同类型的数据存储方法优势,实现了对结构化数据与非结构化数据的混合存储和使用,提高军事训练场信息数据的使用效率。基于以上技术,设计和实现了基于Hadoop和MySQL相结合的高效混合存储系统,达到了对军事训练场数据信息数字化分类存储,高效使用的目的。
【关键词】：大数据 存储 Hadoop MySQL
【学位授予单位】：西安电子科技大学
【学位级别】：硕士
【学位授予年份】：2015
【分类号】：TP333
【目录】：

• 摘要5-6
• ABSTRACT6-9
• 符号对照表9-10
• 缩略语对照表10-13
• 第一章 绪论13-19
• 1.1 大数据存储的研究现状13-16
• 1.1.1 大数据存储研究背景13-14
• 1.1.2 大数据存储的性能特点14
• 1.1.3 大数据存储的发展现状14-16
• 1.2 课题的背景与研究现状16-17
• 1.2.1 课题研究的背景16-17
• 1.2.2 课题研究的国内外现状17
• 1.3 课题的主要研究内容和意义17-18
• 1.4 结构安排18-19
• 第二章 系统相关技术概述19-31
• 2.1 Hadoop架构相关技术19-24
• 2.1.1 Hadoop架构概述19-20
• 2.1.2 Hadoop分布式文件系统20-24
• 2.2 MapReduce并行计算模式24-25
• 2.3 Hbase架构与原理25-26
• 2.4 大数据的分析处理26-27
• 2.5 Hive的架构与组件27-29
• 2.6 本章小结29-31
• 第三章 海量多媒体数据在Hadoop中存储的总体设计31-41
• 3.1 海量多媒体信息存储的需求分析31-33
• 3.1.1 海量信息的采集32-33
• 3.2 图片数据信息的存储33-37
• 3.2.1 图片文件存储格式34
• 3.2.2 图片元数据的存储34-35
• 3.2.3 图片数据存储的读、写流程35-37
• 3.3 流媒体文件的存储37
• 3.4 流媒体数据的处理37-40
• 3.4.1 视频编码压缩38-39
• 3.4.2 视频数据分割39-40
• 3.4.3 视频数据合并与计算40
• 3.5 本章小结40-41
• 第四章 结构化数据的存储设计41-51
• 4.1 结构化数据的组成41-42
• 4.1.2 击发判断的方法41-42
• 4.2 数据库设计与实体描述42-44
• 4.3 数据库使用规范44-49
• 4.4 本章小结49-51
• 第五章 Hadoop与MySQL混合式存储与结合调用51-55
• 5.1 混合式存储架构51-52
• 5.1.1 混合式存储架构方案设计51-52
• 5.2 数据库整合工具Sqoop52-54
• 5.2.1 使用Sqoop导入数据52-53
• 5.2.2 使用Sqoop导出数据53-54
• 5.3 本章小结54-55
• 第六章 工作总结与展望55-57
• 6.1 工作总结55
• 6.2 未来工作55-57
• 参考文献57-59
• 致谢59-60
• 作者简介60

【相似文献】

中国期刊全文数据库 前10条

1 樊彬;柴波;;信息存储系统的嵌入式解决方案[J];计算机系统应用;2013年05期

2 郑守淇;;信息存储系统的体系结构[J];西安交通大学学报;1988年03期

3 黄孟黎;图书馆海量信息存储系统模式的选择与设计——中南财经政法大学新图书馆信息存储系统[J];图书情报工作;2005年02期

4 牛奎光,邢春晓,徐尧强,周立柱;轻型海量信息存储系统的设计和实现[J];计算机工程;2005年10期

5 朱静怡;;计算机信息存储系统的应用管理[J];赤峰学院学报(自然科学版);2013年05期

6 冯天亮;王龙;;数字化校园信息存储系统的设计与实现[J];教育信息化;2006年09期

7 ;畅通信息 简约成本[J];计算机周刊;2001年52期

8 徐杭龙;马冠颖;戴明浪;;我院电子信息存储系统配置实施分析[J];中国医疗设备;2014年06期

9 ;期刊出版的信息存储系统——渊博信息仓储管理系统一览[J];出版与印刷;2001年03期

10 范瑞琦;;厚积薄发,臻于至善——媒体与资讯产业信息化建设中的华为存储[J];现代电视技术;2013年01期

中国重要会议论文全文数据库 前1条

1 刘旭林;余东昌;;气象信息存储系统设计与实现[A];信息技术在气象领域的开发应用论文集（一）[C];2005年

中国重要报纸全文数据库 前10条

1 ;畅通信息 降低成本[N];人民邮电;2001年

2 ;惠普推出新一代信息存储系统[N];人民邮电;2004年

3 ;高校科研的坚实后盾[N];中国电脑教育报;2005年

4 ;惠普 StorageWorks参考信息存储系统方案[N];电脑商报;2005年

5 本报记者 谌力;寻求价值与投资的平衡[N];网络世界;2004年

6 郭;EMC DMX重新定义高端存储[N];计算机世界;2003年

7 金巍;构建永续运行环境[N];中国计算机报;2002年

8 记者 梁均贵 通讯员 王红斌 郭卉;IT女杰[N];湖北日报;2004年

9 CPW记者 凡妮;EMC让高端存储更经济[N];电脑商报;2003年

10 EMC大中华区企业级网络存储营业经理 王家淦;提供全面NAS解决方案[N];中国计算机报;2004年

中国硕士学位论文全文数据库 前1条

1 周亮;军事训练场海量信息存储系统[D];西安电子科技大学;2015年

，

本文编号：569564