基于Hadoop的IPTV故障预判算法的研究及系统实现

发布时间：2020-06-11 15:25

【摘要】：随着科技的不断进步和互联网技术的不断发展,IPTV正逐渐改变着人们的生活方式。然而由于IPTV机顶盒本身出现的故障或者网络传输堵塞等问题导致用户在使用IPTV机顶盒的时候偶尔出现卡顿、花屏等情况,造成了用户的体验下降。为了提升用户体验,减少用户的流失,运营商希望利用现有的IPTV机顶盒数据和报障用户数据建立IPTV故障预判模型,用以预测IPTV故障情况,以便在用户主动报障之前提前检测和维修IPTV机顶盒,解决用户即将面临的问题,提高用户体验。本论文就是基于这个问题展开研究的。一方面,本论文根据传统朴素贝叶斯分类算法的条件独立性假设条件,并结合数据属性本身的信息增益和数据条件属性与决策属性间的相关系数,将信息增益占整体信息增益的比值和属性间的相关系数作为综合权重,提出了一种基于综合加权的朴素贝叶斯分类算法,作为IPTV用户报障预测中的分类器。实验结果表明,该算法比普通NB算法、WNB-G算法、WNBCC算法的分类效果要好且性能更加稳定。另一方面,由于IPTV数据集是一个非均衡的数据集,本论文结合IPTV数据的特点,对传统非均衡数据集处理算法SMOTE做出了改进,提出了一种改进型SMOTE过采样算法,实现非均衡数据的处理。该算法首先通过K-Means方法对少数类样本进行聚类,然后在每一个类簇中利用样本的近邻类型之间的数量关系再次对类簇进行分类,并删除噪声样本。然后根据输入的随机数与类簇中子类样本数量的比例关系选择在不同的子类样本中进行SMOTE再抽样。最后我们将该算法跟综合加权的朴素贝叶斯分类算法结合起来建立IPTV用户报障预测模型。实验结果表面,该模型比其它模型预测效果要好。在系统实现方面,本论使用Hadoop平台建立IPTV故障预判系统,并实现了一个易于操作的前端可视化界面。后台主要包括数据存储、分布式计算、通信几个功能,前端可视化界面主要提供登录功能、权限管理、交互功能、显示功能、管理功能。
【图文】：

图 5.5 系统登陆界面的首页功能如图 5.6 所示，首页展示了使用须知和使用说明，可以本系统的使用。左侧菜单分别展示了服务器配置、数据导入、处理询、管理员管理等功能，，下面将分别介绍这些功能的使用方法。

南京邮电大学专业学位硕士研究生学位论文 第五章 IPTV 故障预判系统的设计与实现图 5.5 系统登陆界面本系统的首页功能如图 5.6 所示，首页展示了使用须知和使用说明，可以更好的帮助工作人员熟悉本系统的使用。左侧菜单分别展示了服务器配置、数据导入、处理数据、算法选择、统计查询、管理员管理等功能，下面将分别介绍这些功能的使用方法。
【学位授予单位】：南京邮电大学
【学位级别】：硕士
【学位授予年份】：2018
【分类号】：TN949.292

【参考文献】

相关期刊论文 前8条

1 张步良;;基于分类概率加权的朴素贝叶斯分类方法[J];重庆理工大学学报(自然科学);2012年07期

2 陈朝大;梁柱勋;郑士基;;一种利用关联规则的改进朴素贝叶斯分类算法[J];计算机系统应用;2010年11期

3 李方;刘琼荪;;基于改进属性加权的朴素贝叶斯分类模型[J];计算机工程与应用;2010年04期

4 白似雪;梅君;吴穹;朱涛;;一种基于概率加权的朴素贝叶斯分类[J];南昌大学学报(理科版);2009年02期

5 张明卫;王波;张斌;朱志良;;基于相关系数的加权朴素贝叶斯分类算法[J];东北大学学报(自然科学版);2008年07期

6 王峻;刘淮生;;一种选择性的加权朴素贝叶斯分类器[J];湖南文理学院学报(自然科学版);2008年01期

7 秦锋;任诗流;程泽凯;罗慧;;基于属性加权的朴素贝叶斯分类算法[J];计算机工程与应用;2008年06期

8 何慧;苏一丹;覃华;;基于信息增益的贝叶斯入侵检测模型优化的研究[J];计算机工程与科学;2006年06期

本文编号：2708099