基于数据仓库的监督管理系统的设计与实现

发布时间：2017-08-17 01:27

  本文关键词：基于数据仓库的监督管理系统的设计与实现

  更多相关文章： 数据仓库 ETL 公安信息化 系统开发

【摘要】：随着公安业务规模的不断扩发,以及信息化的不断发展,公安局纪委传统的监督机制已经不适应当前公安业务信息化程度。某局委面临着监督效率低、范围窄等问题,所以需要通过新的监督机制、监督手段的创新提高监督的实效性,扩大监督范围。某局委监督管理系统则根据监督信息化需求应运而生。各个公安业务部门如人口、消防等已经将业务信息汇总到了情报中心,为监督管理系统的建设提供了数据支撑。某局委监督管理系统数据来源于多种业务单位的不同数据库选型,通过数据仓库主题模型、逻辑模型、物理模型的构建,将数据仓库数据源分为6大主题域,构建了基于6大主题域的星型逻辑模型,并实现了逻辑模型在数据库中的物理存储,并通过ETL工具结合数据仓库模型,将源业务系统中的数据抽取、转换、加载到数据仓库中。数据仓库的构建实现了对多源异构数据的统一规范。监督管理系统采用MVC设计思路,整合spring mvc和hibernate轻量级J2EE框架技术,设计实现了某局委监督管理系统,并将系统分为监测服务子系统和预警管理子系统两大子系统,以及监测点定义模块、监测点策略管理模块、监测任务管理模块、监测日志查询模块、监测点来源系统模块、支撑数据表集模块,工作提示模块、预警提示模块、督办管理模块九个模块。本系统通过规则库中保存的执行sql语句监测出异常数据,并在预警管理模块进行展示,实现了通过对监测点规则的配置完成问题数据动态预警的业务目标。目前,监督管理系统已经投入使用,本系统实现了来源于5个单位的15个业务系统的149个监测点,整体性能满足业务需求,有效提高了某局委的监督实效,实现了对公安队伍的廉政建设的信息化管理。
【关键词】：数据仓库 ETL 公安信息化 系统开发
【学位授予单位】：北京工业大学
【学位级别】：硕士
【学位授予年份】：2016
【分类号】：TP311.52;TP311.13
【目录】：

• 摘要4-5
• Abstract5-9
• 第1章 绪论9-13
• 1.1 研究背景及意义9
• 1.2 国内外现状分析9-12
• 1.2.1 公安监督管理信息化建设现状9-10
• 1.2.2 数据仓库国内外现状10
• 1.2.3 ETL国内外现状10-12
• 1.3 本文的主要内容及组织结构12-13
• 第2章 数据仓库和系统开发框架概述13-23
• 2.1 数据仓库13-17
• 2.1.1 数据仓库概念及特点13-14
• 2.1.2 开发数据仓库步骤14-17
• 2.2 ETL17-19
• 2.2.1 ETL概念17
• 2.2.2 数据抽取17-18
• 2.2.3 数据转换18
• 2.2.4 数据加载18-19
• 2.3 系统开发框架19-21
• 2.3.1 框架设计原则19-20
• 2.3.2 采用J2EE架构20
• 2.3.3 基于面向服务的体系结构（SOA规范）设计20-21
• 2.3.4 采用Web Service技术21
• 2.4 本章小结21-23
• 第3章 某局委监督管理系统需求分析23-31
• 3.1 项目概述23-25
• 3.1.1 现状分析23
• 3.1.2 系统目标23-25
• 3.2 数据需求25-26
• 3.3 系统角色及权限26-27
• 3.4 系统功能分析27-29
• 3.4.1 系统功能模块27-28
• 3.4.2 系统用例分析28-29
• 3.5 流程分析29-30
• 3.5.1 预警提示处理流程29-30
• 3.5.2 督办处理流程30
• 3.6 本章小结30-31
• 第4章 某局委监督管理系统的设计31-53
• 4.1 某局委监督管理系统总体设计31-35
• 4.1.1 总体设计31
• 4.1.2 性能设计31-33
• 4.1.3 安全性设计33
• 4.1.4 接口设计33-35
• 4.2 基于数据仓库的监察数据库设计35-41
• 4.2.1 数据仓库建设步骤36
• 4.2.2 主题模型设计36-38
• 4.2.3 概念模型设计38-39
• 4.2.4 逻辑模型设计39-41
• 4.2.5 物理模型设计41
• 4.3 监督管理系统功能数据库设计41-48
• 4.3.1 监测点管理模块数据库设计42
• 4.3.2 预警模块数据库设计42-48
• 4.4 基于规则库的自动生成sql设计48
• 4.5 系统功能模块设计48-51
• 4.5.1 监测管理模块设计49-51
• 4.5.2 预警管理模块设计51
• 4.6 本章小结51-53
• 第5章 某局委监督管理系统的实现53-71
• 5.1 系统实施架构53-55
• 5.1.1 系统运行环境53-54
• 5.1.2 系统网络架构54-55
• 5.1.3 系统开发环境55
• 5.2 数据仓库的ETL实现55-63
• 5.2.1 ETL逻辑架构55-56
• 5.2.2 ETL自动化56-57
• 5.2.3 ETL作业57-58
• 5.2.4 数据抽取58-60
• 5.2.5 数据转换60-62
• 5.2.6 数据加载62-63
• 5.3 规则库自动生成sql开发实现63-64
• 5.4 监测管理模块64-68
• 5.4.1 监测点定义模块64-65
• 5.4.2 监测策略管理模块65-66
• 5.4.3 监测任务管理模块66
• 5.4.4 监测日志查询模块66-67
• 5.4.5 监测点来源系统模块67
• 5.4.6 支撑数据表集模块67-68
• 5.5 预警管理模块68-70
• 5.5.1 工作提示模块68
• 5.5.2 预警管理模块68-70
• 5.5.3 督办管理模块70
• 5.6 本章小结70-71
• 结论与展望71-73
• 参考文献73-75
• 攻读硕士学位期间所发表的学术成果75-77
• 致谢77

【相似文献】

中国期刊全文数据库 前10条

1 史金红,吴永明;影响数据仓库成功的关键因素[J];电子工程师;2000年01期

2 宋玉长,李本勇,郭小红;如何构建银行数据仓库[J];上海微型计算机;2000年47期

3 贾纳豫;数据仓库的概念与机制[J];玉溪师范学院学报;2000年S1期

4 陈京民;数据仓库开发的规划研究[J];计算机与网络;2000年09期

5 杨顺生;数据仓库锁紧商业银行(上)[J];中国计算机用户;2000年04期

6 ;数据仓库仔细看[J];每周电脑报;2000年10期

7 禾川;;数据仓库起热潮之应用篇[J];每周电脑报;2000年48期

8 杨顺生;;中国商业银行应实施数据仓库[J];金融电子化;2000年03期

9 顾晓姝;;数据仓库体系及其实现[J];运城高等专科学校学报;2000年S1期

10 袁磊,陈长清,冯玉才;数据仓库的信息供应链模型[J];计算机工程与应用;2001年22期

中国重要会议论文全文数据库 前10条

1 陈金雄;刘雄飞;王庆森;;医院数据仓库的设计与实现[A];首届中国IT与医药卫生高层论坛论文集[C];2004年

2 何朝红;;数据仓库在我国企业的应用现状及实施策略分析[A];广西计算机学会2006年年会论文集[C];2006年

3 刘奇;;肿瘤专业数据仓库的建立[A];第四届中国肿瘤学术大会暨第五届海峡两岸肿瘤学术会议教育集[C];2006年

4 郭远远;舒红平;宫蕊;;基于数据仓库的构建和马尔可夫过程的应用研究[A];2008'中国信息技术与应用学术论坛论文集（二）[C];2008年

5 金周;;基于数据仓库的能耗指标查询体系[A];全国冶金自动化信息网2009年会论文集[C];2009年

6 李洁;李庆忠;王海洋;;一种有效的在线修改数据仓库算法[A];第十六届全国数据库学术会议论文集[C];1999年

7 冯建华;蒋旭东;刘建民;周立柱;;面向市场分析与预测的数据仓库平台[A];第十六届全国数据库学术会议论文集[C];1999年

8 王晓玲;谢鸿强;刘安;董逸生;;数据仓库建模工具的研制[A];第十七届全国数据库学术会议论文集（研究报告篇）[C];2000年

9 张德辉;李建中;;多维压缩数据仓库上的并行聚集算法[A];第十七届全国数据库学术会议论文集（研究报告篇）[C];2000年

10 潘海为;李建中;;数据仓库的并行加载算法[A];第十七届全国数据库学术会议论文集（研究报告篇）[C];2000年

中国重要报纸全文数据库 前10条

1 本报记者　　于　岫;建设数据仓库 打造信息时代的“航母”[N];中国国门时报;2005年

2 庄川 编译;如何迈出实施数据仓库的第一步[N];中国计算机报;2005年

3 本报记者 龚杰;数据仓库解决策之惑[N];计算机世界;2004年

4 记者 王璐;上证所建成中国金融业最大数据仓库[N];上海证券报;2005年

5 ;数据仓库的历史[N];中华读书报;2003年

6 万振龙;动态数据仓库承接历史与未来[N];网络世界;2009年

7 本报记者 薛斐;数据仓库沙中淘金[N];计算机世界;2002年

8 本报记者 王向东;“数据仓库不是玩酷”[N];计算机世界;2003年

9 本报记者 潘永花;数据仓库峥嵘时[N];网络世界;2003年

10 本报记者 潘永花;数据仓库创新与众不同[N];网络世界;2010年

中国博士学位论文全文数据库 前10条

1 宋旭东;企业集团数据仓库系统关键技术研究[D];大连理工大学;2010年

2 陈燕;数据仓库的设计与实现[D];大连理工大学;2000年

3 冯玉;数据仓库环境中近似查询处理技术研究[D];中国科学院研究生院（计算技术研究所）;2002年

4 孙剑;海洋环境数据仓库与数据挖掘应用研究[D];中国海洋大学;2011年

5 栗然;电力负荷分析与预测的分布式数据仓库和数据挖掘研究[D];华北电力大学（河北）;2009年

6 李学锋;矿山企业数据仓库的应用研究[D];昆明理工大学;2005年

7 马军杰;基于数据仓库与联机处理的区域经济发展管理决策支持系统研究[D];华东师范大学;2007年

8 陈金玉;数据仓库实体化视图联机—致性维护研究[D];重庆大学;2002年

9 赵贵菊;勘探开发数据仓库的模型研究和应用[D];中国地质大学（北京）;2010年

10 朱传华;三峡库区地质灾害数据仓库与数据挖掘应用研究[D];中国地质大学;2010年

中国硕士学位论文全文数据库 前10条

1 李佳航;基于数据仓库的银行中间业务系统研究[D];厦门大学;2008年

2 王R，

本文编号：686508