通信网告警规则挖掘系统的设计与实现

发布时间：2021-06-11 23:42

　　在普及通信和网络的时代,民众对通信网络质量的要求很高。通信网设备故障不但会导致网络质量下降,还会对用户体验产生负面影响,甚至会造成经济上的损失。由此,对于通信网络质量的要求达到苛刻的程度。通信网告警是反应通信网络状态最敏感的信号。现在的通信网组网密集且复杂,单一原因引起的故障很容易产生告警风暴。现有的分析逻辑是:事先给出规则来进行告警归并和分析处理。这种方法没有办法对新的规则自动发现,无法响应新出现的各种状况;也无法有效应对通信网日益复杂的组网结构和处理告警风暴。因此,通信网告警规则的自动发现是有价值、有意义的。本文针对通信网告警数据的特点,结合关联分析算法进行分析,使得告警规则可以被主动发现。针对实际告警数据的特点和算法输入所需数据结构的要求,设计并实现从现网抽取告警数据,关联资源,过滤无效值,进行有效分组等操作,以满足数据挖掘算法的输入要求。本文采用从批处理到分布式,再到流式数据的处理方式;应用大数据与流式数据处理分析平台等技术,挖掘出相关告警规则。对于算法挖掘出的结果进行分析、归类和总结。完成界面和数据挖掘处理相关模块的设计、实现和功能测试。主要的成果有:运用软件工程的思想,结合... 

【文章来源】：哈尔滨工业大学黑龙江省 211工程院校 985工程院校

【文章页数】：106 页

【学位级别】：硕士

【部分图文】：

告警规则挖掘系统的业务流程图

配置管理：包括数据源、算法包、采集机等的配置。任务管理：包括任务查看、下发任务和终止任务。下发任务包括普通任务和大数据分析任务。包括实时任务以及后台任务的下发、查看以及终止操作等功能。（3）结果查看、分析、处理的需求。查看与分析：可以查看分析经过数据挖掘后的结果。提交专家组功能（针对普通用户）：未经过验证的结果可以提交专家组进行下一步分析，以分析其产生的隐含原因，为对通信网络的整体的掌控性。专家审核功能（针对专家账户）：专家账户对普通账户提交的结果进行深度分析。决定此规则是否可以使用。

哈尔滨工业大学工程硕士学位论文-23-果集，从而可以得到：L={{E:7},{B:6},{A:6},{D:2},{C:2}}接着进行FP树的构造。从上至下根据一定的规则进行创建，根结点首先创建，并赋值为“null”。接着进行第二次数据库Database的扫描操作。依据L中的次序进行数据处理操作，从而实现对每个项的处理，树中每个分枝就表示一个事务。在具体操作的FP树的过程中需要首先用一个项头表对其进行操作，对于每一项都需要寻找它在树中的具体位置，为此就需要定义一个结点链。将所有的事务扫描后就可以将结果在下图中进行表示，从而可以得到需要的节点链，所以在FP树上将所有的数据库频繁模式都扫描了进来，因此挖掘FP树就是所需要研究的挖掘问题。存放压缩的频繁模式信息的FP树如图2-3所示。图2-3存放压缩的频繁模式信息的FP树表2-2通过创建条件（子）模式基挖掘FP树项条件模式基条件FP树产生的频繁模式C{{EB:1},{EBA:1}}<E:2,B:2>{EC:2},{BC:2},{EBC:2}D{{EB:1},{E:1}}<E:2>{ED:2}A{{EB:2},{E:2},{B:2}}<E:4,B:2>,<B:2>{EA:4},{BA:4},{EBA:2}B{{E:4}}<E:4>{EB:4}下一步挖掘FP树。首先从频繁模式为1的地方出发，这个模式称为初始后缀模式，接着创建相应的条件模式基，接着创建相应的FP树，从而以这个树为


本文编号：3225500