交通大数据集群的运维系统设计与实现

发布时间：2017-12-11 16:32

  本文关键词：交通大数据集群的运维系统设计与实现

  更多相关文章： 集群运维 大数据集群 集群信息采集

【摘要】：随着社会的不断发展和经济条件的不断上升,大数据技术及其运用已越来越遍及世界各国的各个信息技术领域,大数据技术势必为信息技术领域带来新一轮的改革。大数据实质上是一种资源池,资源池实质上是各种低廉计算资源的整合。交通行业中,交通大数据能够为从事交通行业的部门提供自助、按时所需的服务,并且能够降低对基础设施的投入成本,从而在某种程度上提高交通部门的工作效率。因此,交通大数据在提高交通部门的信息化方面具有至关重要的作用,它也将会成为近年最具潜力、最具生产力的研究领域。那么,如何保证交通大数据集群无间断正常运行,为交通部门提供无间断的服务,交通大数据集群的运维系统起到关键作用。但是,如何保障交通大数据集群的运维系统有效、无间断的运行成为亟需解决的问题。目前,市面上的运维系统一般都是传统型的运维系统,一一般知识针对某一种集群进行运维,或者知识针对一个单机版的系统进行监控运维,无法对大数据集群下的多种小集群分别进行详细的监控运维,所以建立一个高效、实时、详细的大数据集群的运维系统成为必须要解决的问题。为了解决交通大数据集群的运维系统有效运行,本文以临沂市交通大数据集群环境为背景,结合其大数据集群运维的新特点,研究了交通大数据集群下服务器系统的运维方法,并对交通大数据集群的运维系统进行了设计与实现。首先本文以该领域的研究现状和相关运维管理技术为参考,得出相关大数据集群系统的运维管理方法,同时对交通大数据集群运维管理系统进行了总体架构设计、数据流程图设计、部署架构设计、功能架构设计、系统详细设计;然后,基于系统的设计,对交通大数据集群的运维系统的各个模块进行了实现,实现了针对交通大数据集群系统的基础数据信息采集、性能数据监测采集、程序数据信息采集、性能监控管理以及前台监控展现功能,还有异常信息预警报警。将系统分为三层分别为采集层、存储层、发布层,每一层各自负责自己的工作,采集层主要是信息采集,存储层主要是信息存储,发布层主要是信息发布。最后,对全文的研究工作进行了系统性总结,并对将来的进一步研究进行了剖析与瞻望。
【学位授予单位】：山东大学
【学位级别】：硕士
【学位授予年份】：2017
【分类号】：TP311.52

【相似文献】

中国期刊全文数据库 前10条

1 余光柱;王亮;易先军;邵世煌;;高维大数据集中频繁闭合模式的挖掘[J];计算机工程;2008年17期

2 DAVID MEER;;何为大数据[J];经营者(汽车商业评论);2013年08期

3 陈溪辉,蒋盛益;大数据集乱序方法的应用研究[J];福建电脑;2005年03期

4 ;工业大数据云 利用大数据集推动创新、竞争和增长[J];自动化博览;2012年12期

5 贾俊芳;张日权;;基于分布式的大数据集聚类分析[J];计算机工程与应用;2008年28期

6 王玉荣;钱雪忠;;大数据集挖掘的层次二分抽样算法[J];计算机工程与应用;2010年35期

7 史荧中;王士同;王骏;邓赵红;;基于最小包含球的非静态大数据集的快速分类算法[J];控制与决策;2013年07期

8 古凌岚;;面向大数据集的有效聚类算法[J];计算机工程与设计;2014年06期

9 彭敏;Joseph Rozenfeld;;挑战大容量数据[J];软件世界;2007年22期

10 陈丽敏;杨静;张健沛;;一种基于加速迭代的大数据集谱聚类方法[J];计算机科学;2012年05期

中国重要会议论文全文数据库 前1条

1 章云;徐宁;;大数据集基于等价类的属性重要性定义和约简[A];第二届全国信息获取与处理学术会议论文集[C];2004年

中国重要报纸全文数据库 前4条

1 刘晨;大数据影响企业10趋势[N];中华合作时报;2013年

2 刘涛;大数据不是万能的[N];中国国防报;2014年

3 胡杨;2011年“大数据”应用将强劲增长[N];网络世界;2011年

4 《网络世界》记者 于翔;大数据价值实现任重道远[N];网络世界;2012年

中国硕士学位论文全文数据库 前10条

1 王敬庚;大数据集分类的OSELM集成算法的研究[D];河北大学;2015年

2 王陈希;基于MapReduce的非平衡大数据集分类[D];河北大学;2015年

3 屈鹏飞;复杂产品生命周期设计知识大数据集成和应用研究[D];浙江大学;2016年

4 谭黔林;大数据环境中知识服务及K-medoids算法改进研究[D];广西大学;2016年

5 牛华忠;交通大数据集群的运维系统设计与实现[D];山东大学;2017年

6 王俞翔;面向大数据集的推荐系统研究[D];燕山大学;2014年

7 杨一品;基于大数据集的人体语义参数化建模和体型估计[D];南京大学;2015年

8 王玉荣;关联规则挖掘算法在大数据集上的应用研究[D];江南大学;2011年

9 刘永军;大数据集的属性选择算法的研究与实现[D];东北大学;2005年

10 邬超;基于大数据集的DEM数据管理与调度关键技术研究[D];哈尔滨工程大学;2011年

，

本文编号：1279181