基于大数据的通信企业智慧审计系统设计与应用
发布时间：2021-01-16 04:07
在当今数据大爆炸的时代,传统审计模式已经不能适应日趋复杂的经营环境所带来的变化,大数据审计势在必行,随着通信企业公司管理和经营的系统化、信息化和智能化,各项审计内容和业务资料数据量越来越大。传统的审计工作主要是线下审计,任务繁重、临时性强,并且审计人员较少,缺少统一的数据集市和分析模型支撑,缺乏系统化、常态化、可视化的风险管控与预警,对企业生产经营数据信息的不能够及时有效实现风险管控,做不到对审计数据的全面预知和准确分析,使风险的识别和防范存在滞后性。为了解决传统审计出现的诸多问题,在本次设计中,结合自己多年在通信企业的审计系统建设项目的经验,以智慧审计为研究对象,以大数据为背景,针对审计系统如何在大数据背景下的应用展开研究。通过梳理通信企业审计的相关业务流程,学习业界先进的开发架构,依托大数据平台搭建审计数据集市,以审计思路为线索,以业务系统数据为基础,通过审计模型工具将复杂的审计思路固化在审计系统中,提供数据建模、数据分析与探索能力,实现审计数据在线可视化界面分析和风险系统化管理。采用本设计方案建设的审计系统已投入使用,运行状态良好。审计信息化应用成效显著,由被审单位提供第二手资料...
【文章来源】：兰州大学甘肃省 211工程院校 985工程院校 教育部直属院校
【文章页数】：56 页
【学位级别】：硕士
【部分图文】：
本文组织架构图
兰州大学硕士学位论文基于大数据的通信企业智慧审计系统设计与应用13图2-1ETL功能架构分布式ETL平台提供了如下的能力支撑：（1）提供以分布式架构运行、统一管控多类计算任务的支撑能力。分布式ETL平台能够支撑分布式架构下必不可少的数据加工任务，集中、统一管理分布式处理任务，实时监控，出现异常时及时进行预警。（2）提供平台底层数据处理分析技术的统一封装和能力支撑分布式ETL平台使用了业界通用的、可视化的、操作界面友好的数据处理分析部件，将数据的运算逻辑定义、处理技术的封装和任务调度管理流程化、规范化、标准化，大大提升了数据处理支撑框架的使用体验、易用性和操作效率，大大降低了对开发人员底层技术的要求，使面向业务应用的数据处理分析能够得到快速服务和响应[21]。（3）实时采集调度分布式ETL平台提供了批量采集数据（非实时）和准实时抽取数据两种数据提取方式，能够及时高效的加载、处理、分析每日数据。ETL过程支持并行处理，且必须具备统一自动调度、日志监控和运营管理的功能。（4）数据库工具提供快速有效的数据库工具，以提供快速的数据加载。支持并行数据加载，可以分布式进行，在多个节点同时加载；数据加载基础带宽不低于180MB/s；支持压缩文件数据直接加载。ETL平台的客户端与服务器采用松耦合设计，ETL的服务端可理解为“配置
兰州大学硕士学位论文基于大数据的通信企业智慧审计系统设计与应用224.2数据架构设计审计数据集市是根据通信企业的实际情况建立在企业大数据平台还是EDA内，通过大数据平台抽娶整合、处理、汇集审计所需的各业务平台数据，使用大数据计算工具进行集市建设，使用分布式MPP数据库进行模型加工和自助分析：1、实现审计需求的异构数据整合、跨系统的流程调度与业务整合；2、打造标准化数据服务和服务编排能力，实现数据能力的开放共享；3、以数据+流程的思想，提升实时数据的捕捉和高效处理能力，打破审计获取数据的壁垒。为了更好的管理和使用业务数据，基于企业数据集市之上构建审计数据集市，由企业数据集市统一抽取接口数据、统一整合源头数据支撑扫描中间表加工，在中间表之上加工生成扫描结果表和审计集市宽表。图4-1智慧审计系统数据架构图数据架构结构设计说明如下：（1）数据源审计的数据集市主要来源于企业的BSS、MSS、OSS以及一些手工数据，通过对这些数据跨域、跨系统进行数据的抽龋（2）审计数据集市主要包括基础宽表和整合模型，基础宽表主要是对接口抽取的数据进行加工整合，形式审计需要的基础数据表。整合模型是根据基础数据表及业务模型，进行分析加工、挖掘探索过程数据，形成风险扫描模型、经责风险等过程数据。（3）审计集市应用审计集市主要应用于：提供应用服务结果数据，主要包括风险扫描、专题审计、经责审计集市、非现场审计和项目审计应用等。
【参考文献】：
期刊论文
[1]并行ETL过程的研究与实现[J]. 许力,牟晓光,马云存. 计算机工程与应用. 2009(13)
硕士论文
[1]大数据背景下企业内部审计信息化问题研究[D]. 张鸿深.哈尔滨商业大学 2019
[2]大数据环境下国有企业领导人经济责任审计研究[D]. 朱勇.华中师范大学 2018
[3]电信行业数据仓库数据质量管理系统设计与实现[D]. 毕文俊.中国科学院大学(中国科学院工程管理与信息技术学院) 2017
[4]基于分布式数据库的大数据安全存储研究与实现[D]. 李婧睿.天津大学 2017
[5]浙江电信审计项目管理信息系统的设计与实现[D]. 过堃.山东大学 2014
[6]Hadoop分布式数据清洗方案[D]. 郭逸重.华南理工大学 2012
[7]运营数据仓储（ODS）在电信企业数据集成中的应用[D]. 曹金生.南昌大学 2009
[8]基于数据仓库的数据清洗方法研究[D]. 周芝芬.东华大学 2004
本文编号：2980130
【文章来源】：兰州大学甘肃省 211工程院校 985工程院校 教育部直属院校
【文章页数】：56 页
【学位级别】：硕士
【部分图文】：
本文组织架构图
兰州大学硕士学位论文基于大数据的通信企业智慧审计系统设计与应用13图2-1ETL功能架构分布式ETL平台提供了如下的能力支撑：（1）提供以分布式架构运行、统一管控多类计算任务的支撑能力。分布式ETL平台能够支撑分布式架构下必不可少的数据加工任务，集中、统一管理分布式处理任务，实时监控，出现异常时及时进行预警。（2）提供平台底层数据处理分析技术的统一封装和能力支撑分布式ETL平台使用了业界通用的、可视化的、操作界面友好的数据处理分析部件，将数据的运算逻辑定义、处理技术的封装和任务调度管理流程化、规范化、标准化，大大提升了数据处理支撑框架的使用体验、易用性和操作效率，大大降低了对开发人员底层技术的要求，使面向业务应用的数据处理分析能够得到快速服务和响应[21]。（3）实时采集调度分布式ETL平台提供了批量采集数据（非实时）和准实时抽取数据两种数据提取方式，能够及时高效的加载、处理、分析每日数据。ETL过程支持并行处理，且必须具备统一自动调度、日志监控和运营管理的功能。（4）数据库工具提供快速有效的数据库工具，以提供快速的数据加载。支持并行数据加载，可以分布式进行，在多个节点同时加载；数据加载基础带宽不低于180MB/s；支持压缩文件数据直接加载。ETL平台的客户端与服务器采用松耦合设计，ETL的服务端可理解为“配置
兰州大学硕士学位论文基于大数据的通信企业智慧审计系统设计与应用224.2数据架构设计审计数据集市是根据通信企业的实际情况建立在企业大数据平台还是EDA内，通过大数据平台抽娶整合、处理、汇集审计所需的各业务平台数据，使用大数据计算工具进行集市建设，使用分布式MPP数据库进行模型加工和自助分析：1、实现审计需求的异构数据整合、跨系统的流程调度与业务整合；2、打造标准化数据服务和服务编排能力，实现数据能力的开放共享；3、以数据+流程的思想，提升实时数据的捕捉和高效处理能力，打破审计获取数据的壁垒。为了更好的管理和使用业务数据，基于企业数据集市之上构建审计数据集市，由企业数据集市统一抽取接口数据、统一整合源头数据支撑扫描中间表加工，在中间表之上加工生成扫描结果表和审计集市宽表。图4-1智慧审计系统数据架构图数据架构结构设计说明如下：（1）数据源审计的数据集市主要来源于企业的BSS、MSS、OSS以及一些手工数据，通过对这些数据跨域、跨系统进行数据的抽龋（2）审计数据集市主要包括基础宽表和整合模型，基础宽表主要是对接口抽取的数据进行加工整合，形式审计需要的基础数据表。整合模型是根据基础数据表及业务模型，进行分析加工、挖掘探索过程数据，形成风险扫描模型、经责风险等过程数据。（3）审计集市应用审计集市主要应用于：提供应用服务结果数据，主要包括风险扫描、专题审计、经责审计集市、非现场审计和项目审计应用等。
【参考文献】：
期刊论文
[1]并行ETL过程的研究与实现[J]. 许力,牟晓光,马云存. 计算机工程与应用. 2009(13)
硕士论文
[1]大数据背景下企业内部审计信息化问题研究[D]. 张鸿深.哈尔滨商业大学 2019
[2]大数据环境下国有企业领导人经济责任审计研究[D]. 朱勇.华中师范大学 2018
[3]电信行业数据仓库数据质量管理系统设计与实现[D]. 毕文俊.中国科学院大学(中国科学院工程管理与信息技术学院) 2017
[4]基于分布式数据库的大数据安全存储研究与实现[D]. 李婧睿.天津大学 2017
[5]浙江电信审计项目管理信息系统的设计与实现[D]. 过堃.山东大学 2014
[6]Hadoop分布式数据清洗方案[D]. 郭逸重.华南理工大学 2012
[7]运营数据仓储（ODS）在电信企业数据集成中的应用[D]. 曹金生.南昌大学 2009
[8]基于数据仓库的数据清洗方法研究[D]. 周芝芬.东华大学 2004
本文编号：2980130
本文链接：https://www.wllwen.com/kejilunwen/shengwushengchang/2980130.html
最近更新
教材专著
