多维数据仓库技术在矿井信息化系统中的研究及应用
发布时间：2020-12-24 09:27
随着煤矿企业规模的扩大和信息化水平的不断提高,在经营管理过程中产生了海量的业务数据,如何有效地管理和重组数据资源,提炼出有价值的信息以供决策使用,成为当前煤炭行业“大数据”发展过程中面临的一大难题,而建立基于多维数据仓库技术的矿井信息化系统是解决这一问题的有效途径。本文针对煤矿企业生产运营特点,结合矿井数据多源、异构的特殊性,对数据仓库架构和ETL(Extract,Transform,Load)算法两方面进行系统研究,分别提出了适合矿井数据特点的改进方法,最后以大屯煤电公司综合调度信息管理系统为例,设计实现了矿井多维数据仓库系统。论文主要工作如下:(1)在数据仓库架构方面,分析传统数据仓库架构中存在的不足,设计了一种基于多数据集市的矿井多维数据仓库模型,各数据集市之间通过共同维加强联系。提出一种利用二次集成简化开发,优化数据结构的数据仓库/数据集市体系结构的改进方法。(2)在ETL算法方面,设计基于元数据的改良实时ETL过程,提出了一种基于数据质量控制的实时ETL改进算法,实验表明:基于系统数据日志的实时ETL算法实现了对数据仓库与业务系统之间数据共享零延时的要求;增加了问题数据处理模...
【文章来源】：中国矿业大学江苏省 211工程院校 教育部直属院校
【文章页数】：70 页
【学位级别】：硕士
【部分图文】：
伤亡事故登记界面
图 4-5 伤亡事故数据表Figure 4-5 Casualty and accident data table后，系统会根据登录ID自动记录录入者的队别（TeamID）数据记录一个编号（Num），方便日后的查询修改操作。要包括两部分：亡事故为例，模拟日志生成的过程；日志观察器对整个 ETL 过程进行监控。的日志记录：录了数据库中对数据的每次操作，如 19:00 select 事故单位，事故类别，受伤程度 from 伤亡 20:00 update 伤亡事故表 set 受伤程度=死亡故编号=1000001；员 B；的日志为平面文件，数据仓库系统会根据需求每隔固定得注意的是数据库中数据的格式必须要与系统记录日志的
图 5-3 生产记录日报表Figure 5-3 Daily report of production records.3.2 事故安全记录模块事故安全记录主要包括伤亡事故记录和非伤亡事故记录（设备运行记录）两大，它集成了公司四个主矿井的伤亡事故情况，可依据事故的类别、所在单位、受度、发生时间在多个数据集市之间进行交叉查询。对于发生的一些重大伤亡事故设备故障将会实时展现在信息管理系统中，而一些日常安全情况汇报会在数据仓进行汇总后每天发布一次，页面显示如图 5-4 所示。这些数据的支持，有助于企策者及时发现设备故障，并可通过对事故多发地段、事故多发类型等信息的分定相应预案，有效避免一部分矿井事故的发生。
【参考文献】：
期刊论文
[1]数据仓库技术在银行经营决策中的应用研究[J]. 崔敬东,高庆成. 西南金融. 2014(02)
[2]数据仓库技术在移动通信中的应用分析[J]. 何竺桦. 通讯世界. 2013(17)
[3]基于数据质量控制的ETL[J]. 孙水华,刘建华,林志强. 福建工程学院学报. 2011(04)
[4]ETL系统的设计及其研究[J]. 毕锟,刘军. 软件导刊. 2010(05)
[5]基于数据仓库的ETL过程优化[J]. 彭璐. 计算机与数字工程. 2010(05)
[6]面向数据质量的ETL框架的设计与实现[J]. 李庆阳,彭宏. 计算机工程与设计. 2010(09)
[7]数据挖掘:企业信息化建设的必经之路[J]. 喻声频. 生产力研究. 2009(17)
[8]基于本体的ETL设计研究[J]. 吴飞,邢桂芬,邢玉萍. 计算机工程与设计. 2007(07)
[9]数据仓库/数据集市体系结构的改进[J]. 潘宝娟. 现代计算机. 2006(12)
[10]大型数据仓库实现技术的研究[J]. 陈慧萍,陈岚峰,王建东. 计算机工程与设计. 2006(21)
博士论文
[1]企业集团数据仓库系统关键技术研究[D]. 宋旭东.大连理工大学 2010
[2]三峡库区地质灾害数据仓库与数据挖掘应用研究[D]. 朱传华.中国地质大学 2010
硕士论文
[1]中国邮政速递数据仓库系统ETL的设计与实现[D]. 张建兴.北京交通大学 2014
[2]空间数据仓库的设计与构建[D]. 梁大圣.山东农业大学 2010
[3]基于数据仓库的煤矿决策支持系统研究[D]. 徐振华.北京交通大学 2010
[4]人寿保险数据仓库的设计与实现[D]. 潘晓辉.哈尔滨工程大学 2008
[5]基于数据仓库体系结构的OLAP和数据挖掘技术的研究与应用[D]. 张佳民.吉林大学 2008
[6]粗糙集理论在数据预处理中的应用研究[D]. 刘永超.大连理工大学 2007
[7]面向实时数据仓库的ETL研究[D]. 徐春艳.南京航空航天大学 2007
[8]我国企业管理信息化问题研究[D]. 彭常青.吉林大学 2006
[9]数据仓库在煤炭系统的应用研究[D]. 王峰.辽宁工程技术大学 2004
本文编号：2935405
【文章来源】：中国矿业大学江苏省 211工程院校 教育部直属院校
【文章页数】：70 页
【学位级别】：硕士
【部分图文】：
伤亡事故登记界面
图 4-5 伤亡事故数据表Figure 4-5 Casualty and accident data table后，系统会根据登录ID自动记录录入者的队别（TeamID）数据记录一个编号（Num），方便日后的查询修改操作。要包括两部分：亡事故为例，模拟日志生成的过程；日志观察器对整个 ETL 过程进行监控。的日志记录：录了数据库中对数据的每次操作，如 19:00 select 事故单位，事故类别，受伤程度 from 伤亡 20:00 update 伤亡事故表 set 受伤程度=死亡故编号=1000001；员 B；的日志为平面文件，数据仓库系统会根据需求每隔固定得注意的是数据库中数据的格式必须要与系统记录日志的
图 5-3 生产记录日报表Figure 5-3 Daily report of production records.3.2 事故安全记录模块事故安全记录主要包括伤亡事故记录和非伤亡事故记录（设备运行记录）两大，它集成了公司四个主矿井的伤亡事故情况，可依据事故的类别、所在单位、受度、发生时间在多个数据集市之间进行交叉查询。对于发生的一些重大伤亡事故设备故障将会实时展现在信息管理系统中，而一些日常安全情况汇报会在数据仓进行汇总后每天发布一次，页面显示如图 5-4 所示。这些数据的支持，有助于企策者及时发现设备故障，并可通过对事故多发地段、事故多发类型等信息的分定相应预案，有效避免一部分矿井事故的发生。
【参考文献】：
期刊论文
[1]数据仓库技术在银行经营决策中的应用研究[J]. 崔敬东,高庆成. 西南金融. 2014(02)
[2]数据仓库技术在移动通信中的应用分析[J]. 何竺桦. 通讯世界. 2013(17)
[3]基于数据质量控制的ETL[J]. 孙水华,刘建华,林志强. 福建工程学院学报. 2011(04)
[4]ETL系统的设计及其研究[J]. 毕锟,刘军. 软件导刊. 2010(05)
[5]基于数据仓库的ETL过程优化[J]. 彭璐. 计算机与数字工程. 2010(05)
[6]面向数据质量的ETL框架的设计与实现[J]. 李庆阳,彭宏. 计算机工程与设计. 2010(09)
[7]数据挖掘:企业信息化建设的必经之路[J]. 喻声频. 生产力研究. 2009(17)
[8]基于本体的ETL设计研究[J]. 吴飞,邢桂芬,邢玉萍. 计算机工程与设计. 2007(07)
[9]数据仓库/数据集市体系结构的改进[J]. 潘宝娟. 现代计算机. 2006(12)
[10]大型数据仓库实现技术的研究[J]. 陈慧萍,陈岚峰,王建东. 计算机工程与设计. 2006(21)
博士论文
[1]企业集团数据仓库系统关键技术研究[D]. 宋旭东.大连理工大学 2010
[2]三峡库区地质灾害数据仓库与数据挖掘应用研究[D]. 朱传华.中国地质大学 2010
硕士论文
[1]中国邮政速递数据仓库系统ETL的设计与实现[D]. 张建兴.北京交通大学 2014
[2]空间数据仓库的设计与构建[D]. 梁大圣.山东农业大学 2010
[3]基于数据仓库的煤矿决策支持系统研究[D]. 徐振华.北京交通大学 2010
[4]人寿保险数据仓库的设计与实现[D]. 潘晓辉.哈尔滨工程大学 2008
[5]基于数据仓库体系结构的OLAP和数据挖掘技术的研究与应用[D]. 张佳民.吉林大学 2008
[6]粗糙集理论在数据预处理中的应用研究[D]. 刘永超.大连理工大学 2007
[7]面向实时数据仓库的ETL研究[D]. 徐春艳.南京航空航天大学 2007
[8]我国企业管理信息化问题研究[D]. 彭常青.吉林大学 2006
[9]数据仓库在煤炭系统的应用研究[D]. 王峰.辽宁工程技术大学 2004
本文编号：2935405
本文链接：https://www.wllwen.com/kejilunwen/kuangye/2935405.html
