AntiSpam中全文分词技术的实现与应用研究

发布时间：2019-09-25 03:30

【摘要】： 随着电子邮件的广泛应用，垃圾邮件作为商业广告、恶意程序或敏感内容的载体，也越来越对系统的安全和人们的生活造成了严重的威胁，反垃圾邮件问题已经成为全球性的具有重要现实意义的课题。目前，通常采用的垃圾邮件过滤技术主要可以分为两种方法：基于规则和基于统计的方法。通过设置过滤规则、黑名单等方式过滤垃圾邮件，这些方法对于垃圾邮件的过滤起到了一定的作用，但是这些方法最大的缺点在于过滤过于规则化，缺乏智能性，数据冗余和准确性的问题也比较突出。为解决这些矛盾，本文提出采用一种基于层叠隐马模型的汉语词法分析方法，将汉语分词、词性标注、切分排歧和未登录词识别集成到一个完整的框架中。对减少数据的冗余和提高分词检索的查全率和查准率有明显作用。论文依次介绍了垃圾邮件的产生、发送机制、汉语词法分析、隐马尔可夫模型等技术，在此基础上主要讨论了基于层叠隐马模型的分词系统的研究设计与实现。并给出了试验测试结果分析。
【图文】：

原理图,电子邮件,原理,邮件

户使用的电子邮箱就建立在这类计算机上，借助它提供的服务，，用户的信件通过Internet被送到目的地。具体工作原理如图2一1所示:份:城‘污斗IntCrnet}、一:一:明务书S、乍签l》收户人图2一1电子邮件}_作原理邮件服务器通常被分为三个模块，邮件用户代理 MuA(MailuserAgent)、邮件传输代理M认(Mail肠ansfe:Agent)和邮件分发代理 MDA(MailDeliveryAgent)。MUA程序的职责是允许远程客户读取它们在本地服务器上邮箱中的邮件。本地用户也可以使用MUA程序来访问邮箱中的邮件。MTA程序负责处理所有接收和发送的邮件。对每一个外发的邮件，MTA决定接收方的目的地。若目的地主机是本机，则MTA将邮件直接发送到本地邮箱或交本地MDA进行投递，若目的地主机是远程邮件服务器，则MTA必须使用SMTP协议在互联网上同远程主机通信。MDA程序负责将邮件分发到服务器上的本地用户。当MTA程序决定某份邮件应发往本地用户时，MTA程序将邮件交给MDA程序来进行分发，此时

过程图,邮件传输,过程

昆明理工人学硕1论文第_章垃圾邮件的由来及技术现状保邮件发往正确的目的地。传输过程如下图2一2所示:和螂副一州-TCpj立畏支生友受凡MUA}己履。一.一、黝似、声_霭}冬骥黔…一~‘月麟一、娜卜--一.一舞嘿’报务器鹭矍赢一一J一’熟蔚臀图2一2邮件传输过程 2.2.2SM丁p协议及漏洞SMTP提供了一种邮件传输的机制，其设计模型基于如图2一3所示。当收件方和发件方两方都在一个网络上时，可以把邮件直传给对方;当双方不在同一个网络上时，需要通过一个或几个中间服务器转发。SMTP首先由发件方提出请求，接收方SMTP在同意请求以后就建立了双向的传送渠道，在此之后，双方就可以开始通信了。收方SMTP包括了最终接收者和中间的邮件服务器，并且当双方不在统一个网络的时候，可能到达最终的接收方要经过中间的几次转发刁’能最终完成通信过程。用用户户户文件系统统统文件系统统发发送 SMTPPPPP接收SMTPPP图2一 3SMTP模型示意图发件方SMTP向收件方发处MAIL命令，告知发件方的身份;如果收件方接受
【学位授予单位】：昆明理工大学
【学位级别】：硕士
【学位授予年份】：2007
【分类号】：TP391.1

【参考文献】