智慧社保大数据分析平台构建
发布时间:2022-01-14 23:04
针对社保业务数据分散、大数据分析能力较低等问题,采用"云结构、积木式架构、容器技术、多级权限设计"构建智慧社保大数据分析平台的整体架构。该平台包含数据交换平台、基础计算平台、流程调度平台、管理分析平台和实时分析平台。采用OGG接口技术获取源系统中的增量数据,通过流程调度服务实现对各层数据和业务工作流的调用和管理。该平台已包括1960万人的基本信息,集成了社保的各项业务和服务,为"最多跑一次"助力。
【文章来源】:计算机与现代化. 2019,(06)
【文章页数】:6 页
【部分图文】:
智慧社保整体架构2平台架构及关键技术
ㄏ薨?全接入,实现政务系统全业务无障碍访问服务。基于云计算共享数据平台的智慧社保整体架构如图2所示。重点建设基础支撑层,用以集中各项社保业务数据,构建统一共享的社保大数据平台,将线上“人社云”平台和线下服务平台有机结合,实现“一人一卡、一账户、一钱包”的全方位、全过程的智慧社保服务。图2智慧社保整体架构2平台架构及关键技术智慧社保大数据分析平台包含数据交换平台、基础计算平台、流程调度平台、管理分析平台和实时分析平台,如图3所示。图3社保大数据分析平台
件。GoldenGate能够实现大量业务数据的实时捕捉、变换和投递,实现源数据库与目标数据库的数据同步,保持亚秒级的数据延迟[4],OGG架构如图5所示。Extract进程在源端数据库中读取事务日志文件,提取其中数据的变化信息存放在trailfile中;ServerCollector进程接收从源端传输过来的数据变化信息,把信息缓存到trail文件中;replicat进程从trail文件中读取数据变化信息,创建对应的SQL语句,并通过本地接口执行后,提交到云数据推送平台的MySQL数据库集群。图5OGG架构社保数据交换由部署在不同加载服务器上的数据交换组件完成。通过定时轮询NAS指定目录,获取接口(包括数据文件、控制文件和DDL文件);执行文件级检核,通过检核后,将数据文件和控制文件移动到NAS集群指定目录,触发后续ETL处理,在TaskAutomation调度下执行数据加载和数据归档任务。数据交换平台由多台X86服务器和一个NAS集群构成,如图6所示。X86服务器按照功能分为2组,LVS服务器用于数据获取,加载服务器用于数据加载和归档。NAS集群作为公共数据区,允许各服务器共享访问。
【参考文献】:
期刊论文
[1]核电企业面向开放架构的大数据平台的研究与应用[J]. 徐霞军,任增朋,秦绪涛,杨强. 电力大数据. 2018(10)
[2]大数据在医疗服务与医保治理中的应用——基于数据技术、网络形态和政策支持的向度[J]. 翟绍果,陈兴怡. 江汉学术. 2018(03)
[3]大数据时代社会保障数据化的优势与要求[J]. 周辉. 青春岁月. 2017(21)
[4]复杂环境下的大数据处理[J]. 吴正举. 互联网周刊. 2017(08)
[5]大数据时代的社保信息系统管理研究[J]. 王爽. 中国培训. 2017(08)
[6]基于Golden Gate的数据库异地冗灾技术研究[J]. 姚刚,肖杰,张希成. 信息系统工程. 2016(11)
[7]做好大数据时代的社保档案工作[J]. 丁静. 山东档案. 2016(04)
[8]一种用于云计算数据库的数据挖掘方法研究[J]. 张兵. 控制工程. 2016(06)
[9]中国互联网+社会保障信息系统构建——基于大数据挖掘视角[J]. 郜凯英,杨宜勇. 经济与管理研究. 2016(05)
[10]大数据聚变“智慧社保”[J]. 刘洪清. 中国社会保障. 2014(09)
硕士论文
[1]论政府公共数据共享利用[D]. 宋玉娟.南昌大学 2016
[2]某公司商务智能系统设计与实现[D]. 杨英波.电子科技大学 2014
[3]社保资金支付大数据决策支持平台的研究与实现[D]. 吴宝伟.电子科技大学 2014
本文编号:3589387
【文章来源】:计算机与现代化. 2019,(06)
【文章页数】:6 页
【部分图文】:
智慧社保整体架构2平台架构及关键技术
ㄏ薨?全接入,实现政务系统全业务无障碍访问服务。基于云计算共享数据平台的智慧社保整体架构如图2所示。重点建设基础支撑层,用以集中各项社保业务数据,构建统一共享的社保大数据平台,将线上“人社云”平台和线下服务平台有机结合,实现“一人一卡、一账户、一钱包”的全方位、全过程的智慧社保服务。图2智慧社保整体架构2平台架构及关键技术智慧社保大数据分析平台包含数据交换平台、基础计算平台、流程调度平台、管理分析平台和实时分析平台,如图3所示。图3社保大数据分析平台
件。GoldenGate能够实现大量业务数据的实时捕捉、变换和投递,实现源数据库与目标数据库的数据同步,保持亚秒级的数据延迟[4],OGG架构如图5所示。Extract进程在源端数据库中读取事务日志文件,提取其中数据的变化信息存放在trailfile中;ServerCollector进程接收从源端传输过来的数据变化信息,把信息缓存到trail文件中;replicat进程从trail文件中读取数据变化信息,创建对应的SQL语句,并通过本地接口执行后,提交到云数据推送平台的MySQL数据库集群。图5OGG架构社保数据交换由部署在不同加载服务器上的数据交换组件完成。通过定时轮询NAS指定目录,获取接口(包括数据文件、控制文件和DDL文件);执行文件级检核,通过检核后,将数据文件和控制文件移动到NAS集群指定目录,触发后续ETL处理,在TaskAutomation调度下执行数据加载和数据归档任务。数据交换平台由多台X86服务器和一个NAS集群构成,如图6所示。X86服务器按照功能分为2组,LVS服务器用于数据获取,加载服务器用于数据加载和归档。NAS集群作为公共数据区,允许各服务器共享访问。
【参考文献】:
期刊论文
[1]核电企业面向开放架构的大数据平台的研究与应用[J]. 徐霞军,任增朋,秦绪涛,杨强. 电力大数据. 2018(10)
[2]大数据在医疗服务与医保治理中的应用——基于数据技术、网络形态和政策支持的向度[J]. 翟绍果,陈兴怡. 江汉学术. 2018(03)
[3]大数据时代社会保障数据化的优势与要求[J]. 周辉. 青春岁月. 2017(21)
[4]复杂环境下的大数据处理[J]. 吴正举. 互联网周刊. 2017(08)
[5]大数据时代的社保信息系统管理研究[J]. 王爽. 中国培训. 2017(08)
[6]基于Golden Gate的数据库异地冗灾技术研究[J]. 姚刚,肖杰,张希成. 信息系统工程. 2016(11)
[7]做好大数据时代的社保档案工作[J]. 丁静. 山东档案. 2016(04)
[8]一种用于云计算数据库的数据挖掘方法研究[J]. 张兵. 控制工程. 2016(06)
[9]中国互联网+社会保障信息系统构建——基于大数据挖掘视角[J]. 郜凯英,杨宜勇. 经济与管理研究. 2016(05)
[10]大数据聚变“智慧社保”[J]. 刘洪清. 中国社会保障. 2014(09)
硕士论文
[1]论政府公共数据共享利用[D]. 宋玉娟.南昌大学 2016
[2]某公司商务智能系统设计与实现[D]. 杨英波.电子科技大学 2014
[3]社保资金支付大数据决策支持平台的研究与实现[D]. 吴宝伟.电子科技大学 2014
本文编号:3589387
本文链接:https://www.wllwen.com/shekelunwen/shehuibaozhanglunwen/3589387.html