轻量级主机数据采集与实时异常事件检测方法研究
本文选题:异常检测 + 移动代理 ; 参考:《西安交通大学学报》2017年04期
【摘要】:针对特征值匹配方法不能检测未知异常的缺点以及常驻采集代理占用大量系统资源的问题,提出一种主机数据采集和异常检测方法。采用智能化的移动代理实现主机数据采集,大幅度降低系统中数据采集代理的数量;结合实时异常检测的需求,采用主成分分析方法对所收集的主机信息进行维度约减,并采用聚类方法对降维后的数据进行聚类分析,挖掘其中的异常点;为消除随机异常点对检测结果的影响,采用基于连续时间窗口的主机异常检测方法实现主机异常的准确检测。实验结果表明:与传统方法相比,数据规模相当的情况下,所提方法的时间复杂度减少了50%以上,检测准确率达到了95%以上,适用于主机异常的实时检测。
[Abstract]:To solve the problem that the eigenvalue matching method can not detect unknown anomalies and that resident acquisition agents occupy a large number of system resources, a host data acquisition and anomaly detection method is proposed. The intelligent mobile agent is used to realize the data acquisition of the host computer, which greatly reduces the number of the data acquisition agents in the system, combining with the demand of real-time anomaly detection, the dimension of the collected host information is reduced by principal component analysis method. In order to eliminate the influence of random outliers on the detection results, clustering analysis is used to analyze the dimensionally reduced data, and the outliers are mined. The method of host anomaly detection based on continuous time window is used to detect the host anomaly accurately. The experimental results show that the time complexity of the proposed method is reduced by more than 50% and the detection accuracy is more than 95% when the data scale is equal to that of the traditional method, which is suitable for real-time detection of host anomalies.
【作者单位】: 武汉数字工程研究所系统科研部;武汉数字工程研究所系统软件部;西安交通大学电子与信息工程学院;
【基金】:国家自然科学基金资助项目(61502438,61672026) 陕西省自然科学基金资助项目(2016JM6040) 国防预研基金资助项目(B0820132036)
【分类号】:TP309
【相似文献】
相关期刊论文 前10条
1 ;《数据采集与处理》已成立第五届编委会[J];数据采集与处理;2000年03期
2 ;数据采集与处理2005年(第20卷1一4期)总目次[J];数据采集与处理;2005年04期
3 ;降低数据采集的成本[J];电子测量技术;2005年01期
4 谷波;;数据采集积极性不高[J];施工企业管理;2012年04期
5 ;致谢[J];数据采集与处理;2012年06期
6 ;数据采集与处理2012年(第27卷1~6期)总目次[J];数据采集与处理;2012年06期
7 王丽;;通信计费数据采集网络的模式探讨[J];科技传播;2013年09期
8 ;《数据采集与处理》1987年总目录[J];数据采集与处理;1987年03期
9 ;《数据采集与处理》1988年总目录[J];数据采集与处理;1988年03期
10 ;1995年《中国电子科技文摘》收录1994年《数据采集与处理》文摘情况[J];数据采集与处理;1996年02期
相关会议论文 前10条
1 陈福;周树杰;林小竹;杨跃翔;;应用嵌入式系统进行数据采集的研究[A];2004全国测控、计量与仪器仪表学术年会论文集(下册)[C];2004年
2 王艳萍;李道武;章志明;李可;陈亚微;高俊雄;单保慈;魏龙;;用于小动物PET的数据采集和符合系统[A];第九届全国正电子谱学会议论文集[C];2005年
3 陈青;;侦听模式在数据采集中的应用[A];中国计量协会冶金分会2007年会论文集[C];2007年
4 蔡尹楚;王立校;;多种新型数据采集方式在化工企业能源数据采集中的组合应用[A];中国计量协会冶金分会2014年会暨能源计量与绿色冶金论坛论文集[C];2014年
5 周威;陈五一;;切削数据采集研究[A];大型飞机关键技术高层论坛暨中国航空学会2007年学术年会论文集[C];2007年
6 王磊;马婉丽;姚成虎;;U盘功能在数据采集仪器中的应用和设计[A];第二届全国信息获取与处理学术会议论文集[C];2004年
7 王泽保;;智能化数据采集记录仪[A];1996年中国智能自动化学术会议论文集(下册)[C];1996年
8 迟晓珠;王劲松;;三维加速度数据采集及通讯系统[A];2000全国力学量传感器及测试、计量学术交流会论文集[C];2000年
9 孙嘉兴;刘艳侠;;数据采集中微弱信号处理[A];中国仪器仪表学会第三届青年学术会议论文集(下)[C];2001年
10 华泽玺;王长林;肖鹏;;改善传统通信模式提高数据采集的实时性[A];四川省通信学会2004年通信技术论文集(一)[C];2004年
相关重要报纸文章 前10条
1 浙江省杭州市桐庐县烟草专卖局(分公司) 张韬;客户经理数据采集“小贴士”[N];东方烟草报;2011年
2 佟伟;做好数据采集 强化税收征管[N];长白山日报;2005年
3 葛学忠;我州旅游数据采集任务如期完成[N];民族日报;2008年
4 记者 温跃邋朱锋 通讯员 姜春;人行威海中心支行创新贷款数据采集流程见实效[N];金融时报;2008年
5 刘亚迅 特约记者 方立华;数据采集表评判训练短长[N];解放军报;2010年
6 胡涛;源头数据采集单轨运行[N];中国石化报;2010年
7 王显锋;兰西国税局力争数据采集“开门红”[N];黑龙江经济报;2005年
8 孙红伟 特约记者 程永亮;34个数据采集组嵌入演练场[N];解放军报;2012年
9 张黎明 马敬辉;让胡路国税局做好动态数据采集准备工作[N];黑龙江经济报;2005年
10 张黎明 马敬辉;让胡路国税局动态数据采集进展顺利[N];黑龙江经济报;2005年
相关博士学位论文 前6条
1 邵苏杰;面向智能配用电网数据懫集的流量调度机制[D];北京邮电大学;2015年
2 马英杰;基于3GS的核勘查数据采集及处理系统研究[D];成都理工大学;2010年
3 齐林;面向可追溯的物联网数据采集与建模方法研究[D];中国农业大学;2014年
4 刘传波;列车纵向冲动的机理研究及检测仪器的开发[D];武汉理工大学;2009年
5 牛田野;特殊等离子体环境物理信息获取与处理的研究[D];中国科学技术大学;2008年
6 李忠龙;基于现有传感器的桥梁无线检测技术的研究[D];哈尔滨工业大学;2008年
相关硕士学位论文 前10条
1 胡延凯;公共建筑能耗数据懫集与信息处理一体化集成技术研究[D];山东建筑大学;2015年
2 张丽萍;雷电三维电场数据采集与分析[D];南京信息工程大学;2015年
3 张元;物流运输跟踪数据采集与可视化监控的研究与实现[D];西南交通大学;2015年
4 吴涛;基于宽带卫星的海洋海事信息数据懫集装置研发[D];集美大学;2015年
5 梁佩;实时数据采集系统方案设计与实现[D];西南交通大学;2015年
6 李晓红;基于SOA架构的中职教育数据采集与KPI决策支持系统的构建[D];复旦大学;2013年
7 徐硕硕;基于LabVIEW的燃气能源瞬态数据采集与处理[D];北华航天工业学院;2015年
8 隋玉涛;惠民县民生信息数据采集与分析系统的设计与实现[D];山东大学;2015年
9 李彬雅;基于智能手机的泊车位判寻系统设计[D];福建师范大学;2015年
10 王政;4通道数据采集中频接收机的设计和实现[D];哈尔滨工业大学;2015年
,本文编号:2038500
本文链接:https://www.wllwen.com/kejilunwen/ruanjiangongchenglunwen/2038500.html