基于Hadoop的校园网视频流量访问偏好分析

发布时间：2017-09-12 21:31

  本文关键词：基于Hadoop的校园网视频流量访问偏好分析

  更多相关文章： 校园网视频 偏好分析 Hadoop 网络爬虫 深度包检测

【摘要】：针对传统视频用户访问日志的偏好分析方法存在数据客观性差和用户关联分析困难等问题,在传统偏好分析方法的基础上,面向互联网数据原始流量,提出一种基于主流大数据平台技术Hadoop的校园网视频用户访问偏好分析方案。该方案利用网络爬虫和深度包检测技术,对视频访问内容进行精细化识别,进而研究了校园网视频流量的访问偏好,并对比了My SQL和Hive的查询效率。结果表明,文化层次的差异导致了视频用户群体的不同需求,低成本硬件环境下对大数据的处理Hive更显健壮性。另外,该方案能稳定可靠地实现对校园网视频流量访问的偏好分析,捕捉用户网络舆情,制订定向营销方案并提供个性化视频推荐服务。经现网测试验证,设计的视频访问偏好分析方案达到了预期的效果。
【作者单位】： 重庆邮电大学电子信息与网络工程研究院;
【关键词】： 校园网视频 偏好分析 Hadoop 网络爬虫 深度包检测
【基金】：重庆市应用开发计划资助项目(cstc2013yykf A40006) 2013重庆高校创新团队建设计划(KJTD201312)~~
【分类号】：TP393.18;TP393.06
【正文快照】： 0引言互联网的发展使得视频业务占据网络流量的绝大部分,而通过视频网站访问视频的方式逐渐成为主流[1]。互联网视频流量承载了视频用户的访问数据,对其深度挖掘是用户偏好分析的一个有效途径。同时,校园网视频流量分析将对校园网络维护、拥塞控制及用户管理等领域带来研究价

【相似文献】

中国期刊全文数据库 前10条

1 胡敏;探询校园网新药[J];中国计算机用户;2002年43期

2 韩国彬,梁晓龙;校园网在教学过程中出现的几个问题[J];河北青年管理干部学院学报;2004年03期

3 罗维刚;对校园网实行可运营改造[J];中国计算机用户;2004年27期

4 熊国清;西南民族学院新校区校园网解决方案[J];通信与信息技术;2005年02期

5 钟建林;试论校园网“软网源”建设的若干原则[J];广西梧州师范高等专科学校学报;2005年01期

6 王志斌;;浅谈校园网建设与应用[J];中国教育研究论丛;2006年00期

7 林剑敏;;新型大学校园网络建设的探讨——以福建农林大学校园网为例[J];硅谷;2009年16期

8 于贵;;校园网内部安全防范浅谈[J];长江大学学报(自然科学版);2011年02期

9 伍绍佳;;市级电大校园网升级改造的研究[J];软件;2013年01期

10 荆宜青;罗康;;云存储在高校校园网中的应用[J];信息系统工程;2013年04期

中国重要会议论文全文数据库 前5条

1 夏洪刚;;武汉高校校园网与公众网互联组网的解决方案[A];武汉市首届学术年会通信学会2004年学术年会论文集[C];2004年

2 李栋;;校园网千兆交换机的故障与解决[A];煤矿自动化与信息化——第21届全国煤矿自动化与信息化学术会议暨第3届中国煤矿信息化与自动化高层论坛论文集（下册）[C];2011年

3 黄曦东;裴克军;;论高校校园网中病毒的有效预防和查杀[A];第七届全国体育科学大会论文摘要汇编（二）[C];2004年

4 汤薇;曾艳;;构建校园网搜索引擎必要性分析[A];广西计算机学会2008年年会论文集[C];2008年

5 曹东亚;岳江红;金培莉;;校园网IPv6技术部署方案与实现[A];中国高等教育学会教育信息化分会第十次学术年会论文集[C];2010年

中国重要报纸全文数据库 前10条

1 李理;校园网改造从细致到品质[N];中国计算机报;2005年

2 子知;多元绑定认证计费 高校校园网运营管理新方向[N];中国电脑教育报;2004年

3 ;多元绑定的认证计费高校校园网运营的必由之路[N];通信产业报;2003年

4 ;神州数码网络搭建可运营校园网[N];计算机世界;2003年

5 潘慧英;清华校园网升级到万兆[N];中国计算机报;2003年

6 ;惠普网络助力威海经济区校园网建设[N];中国计算机报;2005年

7 兰改云 Fanyun;强筋壮骨校园网[N];中国电脑教育报;2001年

8 广州中医药大学信息技术学院院长 陈素;万兆核心，分布安全[N];网络世界;2005年

9 ;中型学校校园网 实现对学校管理的网络化延伸[N];中国计算机报;2004年

10 刀伟;NAS校园网的资源仓库[N];中国电脑教育报;2002年

中国博士学位论文全文数据库 前1条

1 邱全杰;基于IPv6的校园网技术升级及性能测量研究[D];重庆大学;2012年

中国硕士学位论文全文数据库 前10条

1 董献芬;民办高校校园网升级改造建设研究[D];山东大学;2016年

2 车杰;独立学院校园网建设的规划与研究[D];吉林大学;2011年

3 孙竞;河北石油职业技术学院校园网方案的设计与研究[D];天津大学;2005年

4 梅挺;校园网及应用的设计与实现[D];四川大学;2003年

5 林奕多;黑龙江煤炭职业技术学院智慧校园方案的设计与实现[D];黑龙江大学;2015年

6 程杰;校园网统一信息系统的设计与实现[D];华东师范大学;2011年

7 吕习良;四川邮电职业技术学院校园网设计[D];电子科技大学;2004年

8 阎林;校园网用户群行为分析模型研究[D];西北师范大学;2012年

9 方莉英;校园信息网的设计与实现[D];电子科技大学;2007年

10 黎慧娟;校园网用户行为的分析与研究[D];广西大学;2007年

，

本文编号：839655