人社大数据分析系统设计与实现

发布时间：2017-09-27 02:44

  本文关键词：人社大数据分析系统设计与实现

  更多相关文章： 大数据 人口迁徙 大学生就业

【摘要】：在国民经济发展过程中,分析人口迁移、迁徙分析、就业分析是十分重要的。在人口迁移分析、迁徙分析和就业分析中,分析城市人口的情况十分重要,分析城市人口流动(迁移、迁徙)行为有助于合理分配社会资源,有效应对交通压力、维护社会公共治安等,对政府决策具有一定的参考价值。在我们国家,根据社会分工,此工作主要由人力资源与社会保障(以下简称：人社)部门负责。以前大多数情况下,基本采用传统的方法分析,包括问卷调查、访谈等形式,成本较高昂且效率较低。移动通信的不断快速发展,在为人们日常生活带来极大便利的同时,所产生的用户移动轨迹数据,可以有效分析城市人口流动情况,利用大学生毕业后的流动分析,可以分析大学生就业的区域,进而,通过城市的区域规划以及集团客户相关信息,分析大学生就业的行业类型等。某通信公司拥有我国大多数人口的移动通信行为数据,并可通过移动终端、移动手机实时获取对每一个用户的运动动态,包括手机号码信息、基站位置信息、时间信息等等。根据国家手机实名制管理的管理相关规定,手机号码必须是实名的,可以与身份证进行对应关联。通过手机号码可以查到、关联到身份证号码信息,与之相对应。目前我国居民身份证号码为18位,它包含了证件所有者的出生省份、市、县(或县级市)或区的编码,以及出生日期,身份证注册的城市、市县、乡镇、街道信息和性别信息、年龄信息。从以上描述的内容,我们可以得到：手机号码,根据手机号码可以查到手机归属地(即手机号码在何处登记的),还有手机通话的移动基站信息,即可以分析手机通话漫游时所处的地理位置,还有手机发生通信行为时的时间。结合以上信息及及对以上信息进行组合,即可分析到使用手机的人在时间和空间上的分布情况及其变化特征。人社部门具有手机用户的社会信息,如原始的身份特征(工人、学生、农民等)、籍贯、就读学校等,通过两种数据的结合,可完成满足人社部门的相应的分析需求。然而,统计大量的海量的大数据比较困难,给统计、查询、分析工作做出了挑战。本文在现有某通讯公司大数据平台的基础上,经过分析人社行业对人口流动的实际需求和业务流程,设计和实现了一个人社大数据分析系统。本文在分析探讨人社大数据分析系统需求的基础情况下,结合项目背景,探讨、分析及讨论了系统的功能需求和非功能性需求,对系统功能性需求和非功能性需求,通过流程图及用例图的形式来详细说明。需求分析之后,又进行了人社大数据分析系统的架构设计。第一,根据系统的需求,设计系统目标和原则,第二,分别对系统技术架构和功能架构进行了设计。在技术架构中,需要考虑的主要问题有很多,包括可扩展性问题、可维护性问题以及性能问题等等,并且对各个层的功能进行了细致的设计与分析。在功能架构设计阶段所做的工作,包括讨论、分析了系统各个部分的功能组成。然后进行系统的详细设计。该部分的论文,主要对各个模块的设计进行了细致的描述。然后给出了人社大数据分析系统的整体结构框图。以下工作在详细设计的基础上完成。开始,对各个模块的实现的功能进行了简单介绍和简单描述,设计出了系统的整体效果图,还有各个部分的实现图。然后,着重分析各个模块的算法。并详细分析和设计了数据结构的实现。后来,又简单地介绍描述了系统测试情况,并且还对压力测试系统的环境搭建情况以及测试过程中出现的问题,进行了详细而细致的分析。综上所述。在分析业务需求以及在大数据技术的基础条件上,设计并实现了人社大数据分析系统。
【关键词】：大数据 人口迁徙 大学生就业
【学位授予单位】：山东大学
【学位级别】：硕士
【学位授予年份】：2016
【分类号】：TP311.52
【目录】：

• 摘要8-10
• ABSTRACT10-13
• 第1章 绪论13-18
• 1.1 人社大数据分析系统开发背景13-14
• 1.2 国内外研究现状14-16
• 1.3 解决的主要问题16
• 1.4 本文的主要工作16-17
• 1.5 论文的组织结构17-18
• 第2章 人社大数据分析系统需求分析18-25
• 2.1 人社大数据分析系统概述18-19
• 2.1.1 人社大数据分析系统项目背景18
• 2.1.2 人社大数据分析系统项目说明18-19
• 2.1.3 人社大数据分析系统概述19
• 2.2 人社大数据分析系统的目标和解决的问题19-20
• 2.3 人社大数据分析系统的需求问题描述20-25
• 2.3.1 人社大数据分析系统功能性需求20-24
• 2.3.2 人社大数据分析系统的非功能性需求24-25
• 第3章 人社大数据分析系统架构设计25-33
• 3.1 人社大数据分析系统的设计目标和原则25-26
• 3.2 人社大数据分析系统技术架构设计26-29
• 3.2.1 人社大数据分析系统物理架构26-27
• 3.2.2 人社大数据分析系统逻辑架构和开发视图27-29
• 3.3 人社大数据分析系统功能架构29-33
• 3.3.1 人社大数据分析系统功能组成29-30
• 3.3.2 人社大数据分析系统数据采集30-33
• 第4章 人社大数据分析系统详细设计33-51
• 4.1 全国迁徙33-38
• 4.1.1 全国迁徙模型设计33
• 4.1.2 全国迁徙数据处理流程分析33-35
• 4.1.3 相关数据库表设计35-38
• 4.2 省内迁徙38-41
• 4.2.1 省内迁徙模型设计38
• 4.2.2 省内迁徙数据处理流程分析38-39
• 4.2.3 相关数据库表39-41
• 4.3 区域分析41-44
• 4.3.1 区域分析模型设计41
• 4.3.2 区域分析数据处理流程分析41-43
• 4.3.3 相关数据库用表43-44
• 4.4 大学生专题44-51
• 4.4.1 未就业大学生44-47
• 4.4.2 就业大学生分析47-51
• 第5章 人社大数据分析系统的实现及测试51-73
• 5.1 人社大数据分析系统总体实现51-70
• 5.1.1 人口流动分析51-59
• 5.1.2 流动人口分析59-61
• 5.1.3 大学生专题分析61-65
• 5.1.4 预测分析65-67
• 5.1.5 运营管理67-70
• 5.2 系统测试70-73
• 第6章 结论73-74
• 参考文献74-76
• 致谢76-77
• 学位论文评阅及答辩情况表77

【参考文献】

中国期刊全文数据库 前10条

1 包婷;章志刚;金澈清;;基于手机大数据的城市人口流动分析系统[J];华东师范大学学报(自然科学版);2015年05期

2 任磊;杜一;马帅;张小龙;戴国忠;;大数据可视分析综述[J];软件学报;2014年09期

3 程学旗;靳小龙;王元卓;郭嘉丰;张铁赢;李国杰;;大数据系统和分析技术综述[J];软件学报;2014年09期

4 赵时亮;高扬;;基于移动通信的人口流动信息大数据分析方法与应用[J];人口与社会;2014年03期

5 姜晓娟;郭一娜;;基于改进聚类的电信客户流失预测分析[J];太原理工大学学报;2014年04期

6 陈佳;胡波;左小清;乐阳;;利用手机定位数据的用户特征挖掘[J];武汉大学学报(信息科学版);2014年06期

7 朱志勇;徐长梅;刘志兵;胡晨刚;;基于贝叶斯网络的客户流失分析研究[J];计算机工程与科学;2013年03期

8 翟健宏;李伟;葛瑞海;杨茹;;基于聚类与贝叶斯分类器的网络节点分组算法及评价模型[J];电信科学;2013年02期

9 黄杰晟;曹永锋;;挖掘类改进决策树[J];现代计算机(专业版);2010年01期

10 李净;张范;张智江;;数据挖掘技术与电信客户分析[J];信息通信技术;2009年05期

中国硕士学位论文全文数据库 前5条

1 刘士佳;基于MapReduce框架的频繁项集挖掘算法研究[D];哈尔滨理工大学;2015年

2 尚丹丹;基于虚拟机的Hadoop分布式聚类挖掘方法研究与应用[D];哈尔滨理工大学;2015年

3 岳雪;基于海量数据挖掘关联测度工具的设计[D];西安财经学院;2014年

4 于宝华;基于数据挖掘的高考数据分析[D];天津大学;2009年

5 杨毅超;基于Web数据挖掘的作物商务平台分析与研究[D];湖南农业大学;2008年

，

本文编号：927215