基于NetFlow的流量统计系统的设计与实现

发布时间：2017-11-10 01:04

  本文关键词：基于NetFlow的流量统计系统的设计与实现

  更多相关文章： 微处理器 网流 流量采集 现场可编程逻辑阵列 流统计

【摘要】：针对以往基于微处理器的流量统计技术已不能满足网络接口带宽快速增长的实际应用需求问题,提出一种基于硬件实现NetFlow的流量统计系统的实现方案。通过充分利用FPGA并行处理的优势,以FPGA+DDRII为核心处理单元,采用全流统计模式,解决了以往采用抽样统计造成的信息偏差问题。实际测试结果表明,该系统满足10Gbps带宽下的实时处理和高精度的识别,与传统软件实现相比,流识别的准确率最大能提高约37%。
【作者单位】： 国家数字交换系统工程技术研究中心;中国人民解放军75779部队;
【基金】：国家863高技术研究发展计划基金项目(2011AA01A103)
【分类号】：TP393.06
【正文快照】： 0引言网络流量统计及分析是掌握网络行为的基础[1],是用于分析网络状况、掌握流量特性的有效方法,可以通过收集数据或报文踪迹,定量的分析不同的网络应用在网络中活动规律。目前流统计的设计大都是基于NetFlow[2]实现的,基于NetFlow的流量统计方法[3]可以获得包括源地址IP、

【参考文献】

中国期刊全文数据库 前7条

1 陈曙晖;苏金树;;基于内容分析的协议识别研究[J];国防科技大学学报;2008年04期

2 周亮;王娟;胡畅华;杨明武;高挺挺;;基于Verilog HDL的DDR2 SDRAM控制器设计[J];合肥工业大学学报(自然科学版);2010年08期

3 张晓初;杨瑞君;吴伟航;胡申明;陈冰;;互联网流量采集分析系统设计与实现[J];计算机工程;2012年03期

4 亓开元;赵卓峰;房俊;马强;;针对高速数据流的大规模数据实时处理方法[J];计算机学报;2012年03期

5 杜瑞;张伟功;邓哲;朱晓燕;;新型总线中并行CRC算法的设计与实现[J];计算机工程与设计;2013年01期

6 程光;唐永宁;;基于近似方法的抽样报文流数估计算法[J];软件学报;2013年02期

7 孟晓蓓;;基于NetFlow的网络流量采集技术和应用[J];武汉理工大学学报;2009年23期

【共引文献】

中国期刊全文数据库 前10条

1 李相迎;姚秀娟;孟新;;CCSDS-TM传输帧识别技术[J];北京邮电大学学报;2011年04期

2 刘晨光;刘伟辉;;基于校园网的流量分析技术研究及应用[J];电脑知识与技术;2011年22期

3 丰江帆;朱毅;;云环境下的流式空间信息服务[J];重庆邮电大学学报(自然科学版);2012年06期

4 杨震;徐敏捷;刘璋峰;秦达;姚晓辉;;语音大数据信息处理架构及关键技术研究[J];电信科学;2013年11期

5 赵清涛;凌小峰;宫新保;;一种多模式多节点高速传输系统的方案设计[J];信息技术;2012年03期

6 占红武;胥芳;;基于DDR2存储器的FIFO设计[J];机电工程;2011年10期

7 符啸威;;基于Netflow技术的互联网流量流向的分析与研究[J];中国现代教育装备;2012年09期

8 石全民;;Netflow网络流量分析技术及在局域网上的应用[J];兰州工业高等专科学校学报;2012年04期

9 张晓燕;赵卓峰;;一种面向车辆实时数据并行处理的任务调度算法[J];计算机与数字工程;2012年11期

10 孟培超;胡圣波;舒恒;曹瑞娟;;基于Hash B+树RFID复杂事件检测算法[J];贵州师范大学学报(自然科学版);2012年06期

中国重要会议论文全文数据库 前1条

1 孟金凤;高仲合;;基于两层自适应超时策略的资源可控流抽样[A];山东计算机学会2013学术年会论文集[C];2013年

中国博士学位论文全文数据库 前1条

1 姚远;海量动态数据流分类方法研究[D];大连理工大学;2013年

中国硕士学位论文全文数据库 前10条

1 张辉;面向网络流识别的正则表达式匹配技术研究[D];首都师范大学;2011年

2 陈蕾;一种面向移动互联网的业务识别方法研究[D];吉林大学;2011年

3 邹天际;网络模拟中背景流量模型的研究[D];哈尔滨工业大学;2010年

4 向宇;HTTP协议还原系统的设计与实现[D];华中科技大学;2011年

5 张洛什;基于Cavium平台的网络流分类系统的设计与实现[D];哈尔滨理工大学;2011年

6 张子文;高效深度报文检测的研究与实现[D];国防科学技术大学;2008年

7 陈贤卿;基于D-S证据理论的视频通信协议融合的研究[D];山东科技大学;2009年

8 黎萌;网络协议分析及可视化系统的设计[D];西安电子科技大学;2010年

9 刘佳雄;基于DPI和DFI技术的对等流量识别系统的设计[D];燕山大学;2010年

10 张晓利;基于N-Code框架的协议识别的研究与实现[D];西南交通大学;2010年

【二级参考文献】

中国期刊全文数据库 前10条

1 叶懋;刘宇红;刘桥;;CRC码的FPGA实现[J];重庆工学院学报(自然科学版);2007年03期

2 刘卫江;龚俭;丁伟;程光;;基于最小二乘法的流长度分布估计方法[J];东南大学学报(自然科学版);2006年03期

3 王忠;李延社;游智胜;;CRC算法设计与程序实现[J];电子测量技术;2007年12期

4 夏光峰;;NetFlow技术及其在高校网络管理中的应用研究[J];合肥学院学报(自然科学版);2007年02期

5 陈鸣;许博;;一种基于NetFlow的网络蠕虫检测算法[J];解放军理工大学学报(自然科学版);2006年04期

6 尹晓琦;;一种循环冗余校验码的设计及VHDL语言实现[J];淮阴工学院学报;2010年01期

7 段辰生;杨昌昊;褚伟;;RTAI下的网络报文捕获平台[J];计算机工程;2009年20期

8 田东,董德存;网络流量技术应用与分析[J];计算机工程与科学;2005年01期

9 张晓初;冯悦;陈依群;吴伟航;周建军;陈斌;;应用级流量测量系统IPTMAS[J];计算机工程与科学;2007年05期

10 陈宁;徐同阁;;NetFlow流量采集与存储技术的研究实现[J];计算机应用研究;2008年02期

【相似文献】

中国期刊全文数据库 前10条

1 薛进学;;视频编码服务器的热设计[J];现代电子技术;2006年15期

2 ;小知识:网络时代三大定律[J];教育与职业;2003年16期

3 ;缩微结构(微处理器)防御和恢复缓冲器溢出攻击[J];电脑与电信;2008年01期

4 欧全梅;;基于ARM核嵌入式微处理器的以太网应用[J];现代电子技术;2006年15期

5 罗小彬;陈家胜;;嵌入式网关设备的设计与实现[J];电子技术;2007年02期

6 唐年庆;刘益和;;基于微处理器的协议转换网关的系统设计[J];微计算机信息;2008年14期

7 刘海英;;基于PIC 8位微处理器的嵌入式以太网硬件电路的设计[J];工业控制计算机;2009年09期

8 ;IBM和Digital推出新的Web硬件[J];每周电脑报;1997年16期

9 ;产品篇[J];中国计算机用户;2003年47期

10 钟家民;王国才;;基于CAN总线技术的嵌入式网关设计[J];微计算机信息;2009年08期

中国重要会议论文全文数据库 前10条

1 刘礼;杨裔;火久元;刘海迪;李振芳;李廉;;数学网络集成环境作业调度系统模型[A];2006年全国理论计算机科学学术年会论文集[C];2006年

2 苑良;史久根;韩江洪;马学森;;嵌入式CAN-Ethernet网关的研究与设计[A];中国仪器仪表学会第九届青年学术会议论文集[C];2007年

3 张声勇;王凤翔;张云贵;王丽娜;;LonWorks现场总线与Internet网关接口的实现[A];冶金企业自动化、信息化与创新——全国冶金自动化信息网建网30周年论文集[C];2007年

4 虞承宜;袁林;;一种基于安全性模块概念的安全协议实施方案[A];第二次计算机安全技术交流会论文集[C];1987年

5 高蕾;佟为明;刘勇;;基于S3C44BOX的以太网MAC帧检测系统设计[A];2009中国仪器仪表与测控技术大会论文集[C];2009年

6 朱国权;王坚;;嵌入式Web Server及其在远程网络图像监控系统中的应用[A];先进制造技术论坛暨第二届制造业自动化与信息化技术交流会论文集[C];2003年

7 聂剑威;王振兴;韩国栋;唐浩;;10×1G以太网链路处理系统的设计与实现[A];2005中国控制与决策学术年会论文集（下）[C];2005年

8 张永德;李鑫;;CAN网到Profibus网关的研究与实现[A];第七届工业仪表与自动化学术会议论文集[C];2006年

9 佟为明;裴斐;李中伟;;基于C8051F023以太网节点及精简TCP/IP协议栈的设计[A];2007'中国仪器仪表与测控技术交流大会论文集（一）[C];2007年

10 仲峰;刘从新;何科;朱荣臻;;基于ARM的无线传感器网络节点的设计[A];'2006系统仿真技术及其应用学术交流会论文集[C];2006年

中国重要报纸全文数据库 前10条

1 张伟华;DRM让内容随网流动[N];网络世界;2004年

2 宋家雨;仅有IP授权是不够的[N];网络世界;2006年

3 清华大学微处理器与SoC 技术研究中心 李鹏 张悠慧;多“芯”一意[N];计算机世界;2005年

4 上海大学 刘锬;四种嵌入式 Internet 实现方式[N];计算机世界;2006年

5 亓亚;网包分类性能：防火墙应用中的关键指标[N];计算机世界;2008年

6 广文;击溃“网络非典”[N];中国电子报;2003年

7 马文方;有备才能无患[N];中国计算机报;2003年

8 潘慧英;解决校园网出口之难[N];中国计算机报;2004年

9 亚平;ZiLOG拓展eZ80Acclaim！8位系列[N];电子资讯时报;2007年

10 杨洪;如何为网管员减负？[N];计算机世界;2004年

中国博士学位论文全文数据库 前1条

1 罗光春;入侵检测若干关键技术与DDoS攻击研究[D];电子科技大学;2003年

中国硕士学位论文全文数据库 前10条

1 叶炼炼;基于数据挖掘的网络流量采集模型研究[D];福州大学;2006年

2 刘春林;基于uCLinux平台（ARM微处理器）的SNMP网络管理设计[D];贵州大学;2006年

3 杜娟;嵌入式Internet应用系统的研究与设计[D];华中科技大学;2005年

4 贾志强;基于TCP/IP的网络流量分析模型的研究[D];中国石油大学;2007年

5 吴方锁;基于IEEE1451标准的网络应用处理器（NCAP）研究与实现[D];华东师范大学;2010年

6 施壮;基于ARM微处理器的嵌入式TCP/IP协议的实现[D];华北电力大学（河北）;2005年

7 徐德琴;基于ARM的嵌入式网络系统研究[D];贵州大学;2006年

8 黄贵平;基于FPGA和ARM的PSTN-LAN网关的研究[D];汕头大学;2006年

9 闻志专;基于ARM的网络地址转换平台设计与实现[D];华中科技大学;2007年

10 李庆坤;基于uClinux的嵌入式动态Web服务器的设计[D];武汉理工大学;2007年

，

本文编号：1164356