基于sFlow的分布式网络流量分析系统

发布时间：2017-12-11 02:19

  本文关键词：基于sFlow的分布式网络流量分析系统

  更多相关文章： sFlow技术 网络流量分析 Hadoop 分布式系统

【摘要】：设计一种分布式流量分析系统,该系统利用分布式计算方法处理大量的sFlow采集信息,避免了传统sFlow收集器在处理大量数据时成为系统瓶颈的问题.
【作者单位】： 吉林大学计算机科学与技术学院;
【基金】：国家自然科学基金(批准号:60973041) 吉林省科技发展计划项目(批准号:20112112)
【分类号】：TP393.06
【正文快照】： sFlow是一种基于随机采样的网络监测技术,可实现超大网络流量(如大于10GB/s)环境下的流量分析.sFlow中的流均为无状态流,sFlow代理随时可将采样数据发送给流信息收集器Collector,这种机制降低了网络设备的负担,但加重了sFlow信息收集器的负担,因为sFlow信息收集器需要进一步加

【参考文献】

中国期刊全文数据库 前8条

1 刘国萍;左维;李春来;欧阳自远;;基于sFlow技术的通信网络流量异常监测方案[J];计算机工程;2007年06期

2 张红林;王宏;;一种基于sFlow的网络流量分析方法[J];计算机工程与科学;2007年08期

3 丁琳琳;信俊昌;王国仁;黄山;;基于Map-Reduce的海量数据高效Skyline查询处理[J];计算机学报;2011年10期

4 翟岩龙;罗壮;杨凯;徐晟晨;;基于Hadoop的高性能海量数据处理平台研究[J];计算机科学;2013年03期

5 刘湘辉,殷建平,唐乐乐,赵建民;网络流量的有效测量方法分析[J];软件学报;2003年02期

6 赵彦荣;王伟平;孟丹;张书彬;李均;;基于Hadoop的高效连接查询处理算法CHMJ[J];软件学报;2012年08期

7 周爱平;程光;郭晓军;;高速网络流量测量方法[J];软件学报;2014年01期

8 谢桂兰;罗省贤;;基于Hadoop MapReduce模型的应用研究[J];微型机与应用;2010年08期

中国硕士学位论文全文数据库 前1条

1 许婷;基于Flow的网络流量测量系统研究[D];西安工程大学;2011年

【共引文献】

中国期刊全文数据库 前10条

1 涂建华;高昊宇;赖文华;;次模函数近似算法求最小弱顶点覆盖[J];北京化工大学学报(自然科学版);2011年01期

2 石恒华;何泾沙;许鑫;;基于三元组信息的网络流量检测点选取算法[J];北京邮电大学学报;2009年S1期

3 曾剑秋;雷俊;邱培刚;;宽带城域网用户流量分析及运营发展建议[J];电信工程技术与标准化;2012年02期

4 石恒华;何泾沙;许鑫;;基于邻接矩阵的网络流量检测点选取算法研究[J];东南大学学报(自然科学版);2008年S1期

5 王晟;赵壁芳;;面向云计算的数据管理技术研究[J];电脑知识与技术;2012年13期

6 陈宏聪;朱华鑫;;基于网络流量自相似性的入侵检测技术[J];计算机安全;2010年06期

7 蒋红艳;林亚平;黄生叶;;网络流量有效监测点的设置模型及求解算法研究[J];电子与信息学报;2006年04期

8 何荣毅;;网络流量监测管理系统的研究与实现[J];硅谷;2008年09期

9 李亮;;全台网环境下的云视频素材转码系统的设计[J];电视技术;2013年10期

10 邹青春;;基于云计算环境的考试数据挖掘算法研究[J];信息安全与技术;2013年07期

中国重要会议论文全文数据库 前10条

1 石恒华;何泾沙;许鑫;;基于邻接矩阵的网络流量检测点设置算法[A];第八届全国信息隐藏与多媒体安全学术大会湖南省计算机学会第十一届学术年会论文集[C];2009年

2 崔涛;齐法制;王彦明;刘宝旭;;基于sFlow的高速网络流量实时监测系统的研究[A];第十四届全国核电子学与核探测技术学术年会论文集（下册）[C];2008年

3 崔涛;齐法制;王彦明;刘宝旭;;基于sFlow的高速网络流量实时监测系统的研究[A];第十四届全国核电子学与核探测技术学术年会论文集（2）[C];2008年

4 薛建锋;徐鹏;;一种基于B/S结构的网络性能监测系统[A];第一届中国高校通信类院系学术研讨会论文集[C];2007年

5 殷泰晖;龚正虎;卓莹;郭陈阳;;分布式网络流量监测系统的关键技术研究[A];计算机技术与应用进展·2007——全国第18届计算机技术与应用（CACIS）学术会议论文集[C];2007年

6 殷建儒;唐红;赵国锋;;一种IP网络带宽和时延的有效测量模型[A];第九届全国青年通信学术会议论文集[C];2004年

7 石恒华;何泾沙;许鑫;;基于三元组信息的网络流量检测点选取算法[A];中国通信学会通信软件技术委员会2009年学术会议论文集[C];2009年

8 乔媛媛;刘芳;凌艳;尹劲松;;云计算环境下MapReduce的资源建模与性能预测[A];2013年全国通信软件学术会议论文集[C];2013年

9 Xiaoguang Han;Jigang Sun;Wu Qu;Xuanxia Yao;;Distributed Malware Detection based on Binary File Features in Cloud Computing Environment[A];第26届中国控制与决策会议论文集[C];2014年

10 刘世洪;陈涛;郑火国;胡海燕;王烁;马涛;;农业产销匹配:云环境下的信息推荐平台[A];中国畜牧兽医学会信息技术分会2014年学术研讨会论文集[C];2014年

中国博士学位论文全文数据库 前10条

1 黎文伟;端到端互联网性能监测技术研究[D];湖南大学;2006年

2 赵敏;基于IP网络视频质量自适应控制的研究[D];西北工业大学;2006年

3 赵文涛;基于网络安全态势感知的预警技术研究[D];国防科学技术大学;2009年

4 朱娜斐;基于RTT相似度的网络延迟估测理论和方法[D];北京工业大学;2012年

5 蒋红艳;基于流量监控的网络性能优化关键技术研究[D];湖南大学;2010年

6 李健;云计算环境下最小化运营开销的调度技术研究[D];北京邮电大学;2013年

7 韩晶;大数据服务若干关键技术研究[D];北京邮电大学;2013年

8 程祥;高效可靠的虚拟网络映射技术研究[D];北京邮电大学;2013年

9 李韧;基于Hadoop的大规模语义Web本体数据查询与推理关键技术研究[D];重庆大学;2013年

10 卢风顺;面向CPU/GPU异构体系结构的并行计算关键技术研究[D];国防科学技术大学;2012年

中国硕士学位论文全文数据库 前10条

1 武毅;基于多核平台的网络测量机制研究[D];北京邮电大学;2011年

2 徐风;移动公司云计算平台原型的构建与测试[D];中南大学;2010年

3 廖玉兰;基于分布式的决策树方法研究[D];电子科技大学;2011年

4 刘克难;基于IPFIX的网络流量分析系统研究与实现[D];西南交通大学;2011年

5 王毅;基于Hadoop的Slope One及其改进算法实现[D];西南交通大学;2011年

6 彭令鹏;安全网关中流量采集和监控代理的设计与实现[D];华中科技大学;2011年

7 李海波;基于MapReduce框架的分布式网络爬行器研究[D];哈尔滨工程大学;2011年

8 李倩;基于MapReduce模型的eMTM三维人体模型生成引擎[D];东华大学;2012年

9 李元洪;基于反馈的动态负载平衡调度算法在Hadoop异构环境中的设计与实现[D];南京理工大学;2012年

10 陈光明;面向SNMP的网络运行状态监测数据采集与管理技术研究[D];解放军信息工程大学;2011年

【二级参考文献】

中国期刊全文数据库 前10条

1 郑瑞卿;黄国斌;;操作系统同步研究——Linux内核同步机制[J];电脑知识与技术;2005年35期

2 林宇,程时端,邬海涛,金跃辉,王文东;IP网端到端性能测量技术研究的进展[J];电子学报;2003年08期

3 王洪波;程时端;林宇;;高速网络超连接主机检测中的流抽样算法研究[J];电子学报;2008年04期

4 房亚群;;网络流量分析现状[J];硅谷;2009年23期

5 李昕;Netflow技术及在网络管理中的应用[J];广西通信技术;2005年03期

6 熊剑锋,张凌,宁国宁,叶昭;基于sFlow的网络流量测量系统[J];华中科技大学学报(自然科学版);2003年S1期

7 程光;龚俭;丁伟;吴桦;强士卿;;基于自适应抽样的超点检测算法[J];中国科学(E辑:信息科学);2008年10期

8 ;Identifying heavy hitters in high-speed network monitoring[J];Science China(Information Sciences);2010年03期

9 单征,赵荣彩,张铮;报文分类算法研究[J];计算机工程与应用;2005年07期

10 王继龙,吴建平;计算机互连网络性能管理体系结构模型研究[J];计算机工程;2000年08期

中国硕士学位论文全文数据库 前5条

1 张定心;报文分类算法的研究[D];中国人民解放军信息工程大学;2003年

2 陈灏;NetFlow原理以及在互联网流量分析中的应用[D];华东师范大学;2006年

3 张正娟;网络流量测量技术的研究与应用[D];西北大学;2007年

4 王志;基于NetFlow的流量统计分析系统设计与实现[D];北京邮电大学;2007年

5 赵冉;网络流量测量系统Ntop的分析与研究[D];西北大学;2008年

【相似文献】

中国期刊全文数据库 前10条

1 杨合林;;流量分析和控制技术的研究与系统建设[J];科技传播;2012年21期

2 卞茳;;构架分布式流量分析系统[J];中国教育网络;2009年06期

3 dream;;巧施妙计卸载Network Monitor[J];电脑迷;2007年07期

4 张坚;;运用流量分析实现网络精细化管理[J];中国科技财富;2008年07期

5 殷晴;;计算机网络即时通信业务流量分析[J];电脑知识与技术;2010年19期

6 杨松;;一种抗流量分析的自动纠错技术研究[J];通信技术;2013年08期

7 周昌令;;流量管理需先行[J];中国教育网络;2009年04期

8 陈向东;;基于流量分析的教育网站评价[J];现代远距离教育;2007年01期

9 王明华;;一种互联网宏观流量异常检测方法[J];中兴通讯技术;2007年05期

10 周浩,姜波,张帆;WebTrends Log Analyzer:流量分析的好帮手[J];微电脑世界;2001年06期

中国重要会议论文全文数据库 前4条

1 徐小燕;刘光裕;;珊溪水库设计流量分析方法探讨[A];中国原水论坛专辑[C];2010年

2 吴畏;唐丽均;;NetFlow技术分析及其管理应用[A];第九届全国青年通信学术会议论文集[C];2004年

3 郭炜;;基于动态基线的业务运营支撑网异常流量检测研究[A];2011年通信与信息技术新进展——第八届中国通信学会学术年会论文集[C];2011年

4 司亚蔚;高腾飞;;写字楼电梯交通流量分析及选型实例[A];河南省土木建筑学会2010年学术研讨会论文集[C];2010年

中国重要报纸全文数据库 前10条

1 本报记者 许婷;百科帝流量分析助运营商走出网络“迷宫”[N];通信产业报;2009年

2 本报记者 吴玉征;斩断流量的黑手[N];计算机世界;2009年

3 ;天下流量Google皆知[N];电脑报;2005年

4 本报记者 徐莉;流量分析成就实时响应[N];网络世界;2004年

5 ;流量精细化管理 创造网络更大价值[N];网络世界;2012年

6 本报记者 逄丹;让网络流量“可视、可评、可预测”[N];通信产业报;2012年

7 本报记者 姚春鸽;让流量可视、可评、可预测[N];人民邮电;2012年

8 ;流量分析：保障个性化行销[N];中国计算机报;2005年

9 马云飞;网络流量还在高速增长[N];中国计算机报;2001年

10 记者 崇晓萌;团宝网或被迫开放[N];北京商报;2012年

中国博士学位论文全文数据库 前2条

1 乔媛媛;基于Hadoop的网络流量分析系统的研究与应用[D];北京邮电大学;2014年

2 熊伟;基于突变理论及协同学的网络流量异常检测方法研究[D];华中科技大学;2011年

中国硕士学位论文全文数据库 前10条

1 张嵘;流量分析技术在电子政务网络中的应用[D];上海交通大学;2007年

2 钱龙;复杂网络技术在流量分析中的应用与研究[D];北京邮电大学;2014年

3 黄杰;NetStream流量分析系统的研究与设计[D];北京邮电大学;2009年

4 苏航;网络应用流量分析与带宽优化[D];大连交通大学;2010年

5 李科峰;Netstrcam Collector系统的开发与测试[D];北京邮电大学;2010年

6 宋辉;Linux系统下基于测量的实时流量分析系统FTAS的设计与实现[D];北京邮电大学;2009年

7 宋鸣;基于流量分析的信息溯源关键技术研究[D];北京邮电大学;2014年

8 孟焱;多资源服务器协同环境下的HTTP流量分析[D];北京邮电大学;2015年

9 蔡远俊;基于SDN和OpenFlow的流量分析系统的研究与设计[D];北京邮电大学;2015年

10 丁涛;面向P2P协议流量分析的网格系统的设计与实现[D];北京邮电大学;2008年

，

本文编号：1276797