ETL技术在双鹤药业决策支持系统设计中的应用
发布时间:2017-10-07 14:47
本文关键词:ETL技术在双鹤药业决策支持系统设计中的应用
【摘要】:如今随着互联网和相关技术的不断发展,人们在日常生活中所产生的数据正在呈爆炸式的增长,而云概念的出现,更是直接将大数据环境融入了我们的生活。目前大数据概念已经渗透到了各个行业中,颠覆了许多企业高层领导的运营思维。同样的,医药行业也不可避免的接受着大数据环境的洗礼,不断冲击着医药行业管理层的思维;大数据分析所带来的巨大隐藏价值吸引了诸多医药业界人士的关注。如何有限的借助大数据分析提高医药行业的客户服务体验和企业的经营管理理念也是目前医药行业高层面临的巨大挑战。大数据真正的核心应用在于数据挖掘,而不仅仅是简单的数据展示、计算、分析。所以,从医药行业的角度出发如何将大数据技术合理应用并突出它在医药行业里所提供和挖掘出的情报价值呢。本文重点介绍了基于数据仓库技术为双鹤药业搭建了一个数据分析平台,为企业高层提供高质量高效率的数据分析服务。本文主要从四个方面对医药行业进行分析的,分别是组织架构、经营模式、运营数据特点等四个方面进行全面分析,并结合企业现状与运营数据特点,提出了一套数据仓库的完整设计方案和制定了具体实施过程。重点解决如下难题:1.通过ETL工具和存储过程的相结合完成了相关数据的转换和清洗。2.引入时间戳及缓慢变化维的思想解决了ETL过程对业务数据增量抽取问题。本次论文针对上述问题,结合目前较为先进的数据仓库技术,从理念、方法、相关技术等方面进行了相关的技术研究,并结合实践,把研究成果实际运用到具体的项目中去解决相关的问题,最终成功的为该企业搭建了一套满足高层对企业日常重要指标进行分析需求数据仓库。
【关键词】:ETL技术 数据仓库技术 数据挖掘技术
【学位授予单位】:北京工业大学
【学位级别】:硕士
【学位授予年份】:2016
【分类号】:F426.72;TP311.13
【目录】:
- 摘要4-5
- Abstract5-9
- 第1章 绪论9-13
- 1.1 背景9
- 1.2 问题与发展9-11
- 1.3 研究内容及所做工作11
- 1.3.1 研究内容11
- 1.3.2 所做主要工作11
- 1.4 本文章节安排11-13
- 第2章 需求分析13-19
- 2.1 问题概述13-15
- 2.2 需求分析15-18
- 2.2.1 数据权限15-16
- 2.2.2 医药企业数据特点16-17
- 2.2.3 数据分析特点17-18
- 2.3 本章小结18-19
- 第3章 系统概要设计19-33
- 3.1 系统总体设计19-20
- 3.1.1 系统的拓扑结构19
- 3.1.2 系统的功能结构19-20
- 3.2 系统软硬件配置20-21
- 3.2.1 硬件配置20-21
- 3.2.2 软件配置21
- 3.3 系统功能模块设计21-22
- 3.4 数据集成方案设计22-24
- 3.5 ETL过程设计24-32
- 3.5.1 ETL工具的选择24-25
- 3.5.2 业务数据抽取25-27
- 3.5.3 业务数据清洗27-28
- 3.5.4 维度表设计28-32
- 3.5.5 事实表设计32
- 3.6 本章小结32-33
- 第4章 详细设计33-53
- 4.1 业务数据抽取系统33-34
- 4.1.1 数据库抽取33-34
- 4.1.2 系统相关日志抽取34
- 4.2 业务数据清洗34-35
- 4.3 模型设计35-45
- 4.3.1 维度设计35-44
- 4.3.2 维度建模脱离复杂范式化44-45
- 4.3.3 维度表的数据校验45
- 4.4 事实表设计45-47
- 4.4.1 物理表结构设计45-46
- 4.4.2 事实表逻辑实现方式46-47
- 4.4.3 事实表更新47
- 4.4.4 事实表数据校验47
- 4.5 ETL任务流程47-49
- 4.5.1 ETL任务步骤48-49
- 4.6 其他技术应用49-51
- 4.6.1 SHELL 脚本的应用49
- 4.6.2 存储过程的应用49-51
- 4.7 本章小结51-53
- 第5章 双鹤药业数据分析报表展示效果53-59
- 5.1 重点品种竞品比率报表53-54
- 5.2 毛利率报表54
- 5.3 投资回报率报表54-55
- 5.4 预算完成率报表55-56
- 5.5 分公司贡献分析56-57
- 5.6 本章小结57-59
- 第6章 总结59-61
- 6.1 总结59
- 6.2 展望59-61
- 参考文献61-65
- 致谢65
本文编号:988470
本文链接:https://www.wllwen.com/qiyeguanlilunwen/988470.html