基于大数据的航空数据采集与处理系统研究与设计

发布时间：2021-08-06 09:47

　　提供了一种基于大数据的航空作战数据采集与处理系统架构技术,包括:多源异构数据采集层,用于获取原始数据并发送给数据治理层;数据治理层,用于接收和对所述原始数据执行解析、清洗转换形成干净数据,并进行预处理形成主题数据;数据管理层,用于对数据生命周期、元数据、数据库、文件等进行管理及统计分析;数据服务层,用于提供数据智能缓存、事件分析、数据发布、数据挖掘等服务;数据应用层,用于接收所述主题数据进行任务复盘和回放,以及基于元数据进行数据地图、商业智能（BI:Business Intelligence）等有价值的数据分析应用。该方法能够有效提高航空数据管理的智能化水平,挖掘数据价值。 

【文章来源】：航空电子技术. 2020,51(02)

【文章页数】：5 页

【部分图文】：

航空数据采集与处理方法流程图

航空数据采集与处理方法功能结构图

Hadoop数据库（HBase:Hadoop Database）是基于Hadoop的非关系型列式存储数据库，主要适用于海量明细数据的随机实时查询。MapReduce是一个编程模型和计算框架，它通过编程模型进行编程开发，然后将程序通过这个计算框架分发到Hadoop大数据平台的集群中运行。支持关系代数运算和矩阵运算，大数据领域的计算需求基本可以通过MapReduce编程来实现。

【参考文献】：
期刊论文
[1]大数据在航空系统的研究现状与发展趋势[J]. 孔祥芬,蔡峻青,张利寒,唐杰,侯晨光.  航空学报. 2018(12)
[2]军队装备保障信息化“大数据之路”初探[J]. 马双涛,王柏华,陈乃阔,钱德沛,刘凯.  价值工程. 2016(19)
[3]大数据在航空业的应用[J]. 芮祥麟.  软件和信息服务. 2015(02)
[4]元数据管理策略的比较研究[J]. 曹蓟光,王申康.  计算机应用. 2001(02)



本文编号：3325548