公安舆情监管管理系统的设计与实现
发布时间:2020-05-20 23:56
【摘要】:互联网信息平台目前已经成为我国最大的信息交流和发布平台。人们通过互联网能够及时的了解全球热点事情,并且能够根据事件来表达自己的想法,以及对事件处理的看法等。虽然互联网平台给人们带来了信息、财富以及便捷的服务外,但互联网平台也出现了类似像反动、色情以及网络犯罪等方面舆论信息,这些信息正在慢慢的侵蚀着人类的精神文明。为了能够有效控制网络舆情诱导事情的发生,必须将各类网络信息进行提取、分析和判断,从而有效监控网络舆情信息。系统利用爬虫技术对新闻信息、论坛数据和博客数据的敏感词汇进行提取,通过数据分析与处理技术来对热点事情和敏感词汇进行分析和挖掘,确保相关部门能够及时的监控社会热点事情。首先,通过详细分析国内外舆情监控管理系统的研究现状,明确课题所要实现的研究内容,在分析公安舆情建设目标的基础上,对系统核心功能性需求和非功能性需求进行详细的分析。其次,课题按照层次化结构设计理念,对系统功能架构和技术架构进行了重点的设计,通过层次化结构可以有效的降低系统模块之间的关联度,从根本上提高系统运行的稳定性和效率;接着,重点对公安舆情数据采集、预处理、任务调度等功能进行详细的设计,从而实现公安舆情数据的自动化、网络化、标准化的采集及预处理。最后,课题对系统使用的分词索引算法进行了详细的设计与实现,并实现系统的核心功能模块。课题在设计与实现公安舆情监控管理系统的基础上,按照软件测试的流程和测试方法对系统的核心功能进行了详细的测试,通过系统测试说明,课题所实现的公安舆情监控管理系统满足用户的实际需求,达到了系统建设的预期目标。
【图文】:
针对公安舆情的结构化数据、非结构化数据、图型数据等多类型数据,设计与实现逡逑公安舆情监控管理系统的采集、存储、分析和应用研宄。本系统的具体研宄内容主要包逡逑括五个部分。本文研宄内容关系框架如图1.1所示。逡逑一:公安舆情数据逦丨二:公安舆情数据逦|三:公安舆情数据逡逑获取逦存储逦分析与处理逡逑^逦逦逦N逦/*逦\逦/逦\逡逑&安舆W存储灥逦■数据处理逡逑v逦J逦建立逦V逦y逡逑f公安舆情数据质量^f分布式分析模逡逑提升逦,逦^建逡逑\逦y邋C逦]邋V.逦逦逡逑(逦公安舆情数据分布逦(逦^逡逑分布式数据采集逦式管理逦图像数据解析逡逑\逦y逦V.逦y逦v逦y逡逑四:公安舆情监控管理系统平台构建逡逑、+前141抵加'i邋f数据分析与建模式具"i逡逑I平台体系结构设计j邋i邋计算基础框架j逦逦j逡逑五:公安舆情系统应用逡逑[数据统计)[舆髓警)[信息查询]f敏感词管理'逡逑图1.1研究内容结构图逡逑Fig.邋1.1邋The邋structure邋of邋research邋contents逡逑(i)公安舆情数据的获取逡逑完成标准化公安舆情数据定义与接口规范制定、数据质量提升和分布式公安舆情数逡逑据采集的研宄
(存储gML文^逡逑C结束)逡逑图2.1网络爬虫工作流程图逡逑Fig.邋2.1邋Work邋flow邋chart邋of邋web邋crawler逡逑2.1.2网页提取技术逡逑随着网络技术的不断发展,各种海量数据信息以网页的形式在互联网平台上展示,逡逑从而供访问者进行浏览和利用。通过网络爬虫技术在互联网平台上获得的数据大多数都逡逑是以HMTL形式进行存储的。HTML网页格式多数是非结构化的、分散和异构的数据逡逑信息。通常包含两部分内容,,分别是展示信息的网页正文,另一个是与网页不相关的数逡逑据信息,比如广告、版权信息等,这部分数据与正文内容不相关,通常需要对这部分的逡逑内容进行过滤。由于HTML网页格式没有固定的标准,内容和界面风格多样化,从而逡逑9逡逑
【学位授予单位】:大连海事大学
【学位级别】:硕士
【学位授予年份】:2018
【分类号】:D631.4;TP311.52
本文编号:2673404
【图文】:
针对公安舆情的结构化数据、非结构化数据、图型数据等多类型数据,设计与实现逡逑公安舆情监控管理系统的采集、存储、分析和应用研宄。本系统的具体研宄内容主要包逡逑括五个部分。本文研宄内容关系框架如图1.1所示。逡逑一:公安舆情数据逦丨二:公安舆情数据逦|三:公安舆情数据逡逑获取逦存储逦分析与处理逡逑^逦逦逦N逦/*逦\逦/逦\逡逑&安舆W存储灥逦■数据处理逡逑v逦J逦建立逦V逦y逡逑f公安舆情数据质量^f分布式分析模逡逑提升逦,逦^建逡逑\逦y邋C逦]邋V.逦逦逡逑(逦公安舆情数据分布逦(逦^逡逑分布式数据采集逦式管理逦图像数据解析逡逑\逦y逦V.逦y逦v逦y逡逑四:公安舆情监控管理系统平台构建逡逑、+前141抵加'i邋f数据分析与建模式具"i逡逑I平台体系结构设计j邋i邋计算基础框架j逦逦j逡逑五:公安舆情系统应用逡逑[数据统计)[舆髓警)[信息查询]f敏感词管理'逡逑图1.1研究内容结构图逡逑Fig.邋1.1邋The邋structure邋of邋research邋contents逡逑(i)公安舆情数据的获取逡逑完成标准化公安舆情数据定义与接口规范制定、数据质量提升和分布式公安舆情数逡逑据采集的研宄
(存储gML文^逡逑C结束)逡逑图2.1网络爬虫工作流程图逡逑Fig.邋2.1邋Work邋flow邋chart邋of邋web邋crawler逡逑2.1.2网页提取技术逡逑随着网络技术的不断发展,各种海量数据信息以网页的形式在互联网平台上展示,逡逑从而供访问者进行浏览和利用。通过网络爬虫技术在互联网平台上获得的数据大多数都逡逑是以HMTL形式进行存储的。HTML网页格式多数是非结构化的、分散和异构的数据逡逑信息。通常包含两部分内容,,分别是展示信息的网页正文,另一个是与网页不相关的数逡逑据信息,比如广告、版权信息等,这部分数据与正文内容不相关,通常需要对这部分的逡逑内容进行过滤。由于HTML网页格式没有固定的标准,内容和界面风格多样化,从而逡逑9逡逑
【学位授予单位】:大连海事大学
【学位级别】:硕士
【学位授予年份】:2018
【分类号】:D631.4;TP311.52
【参考文献】
相关期刊论文 前9条
1 谌艳青;;公安网络舆情分析师职业素养初探[J];办公室业务;2014年15期
2 马海兵;毕久阳;邱君瑞;;网络舆情安全应用中主题分类方法的研究与实现[J];现代情报;2012年04期
3 肖文涛;范达超;;网络舆情事件的引导策略探究[J];中国行政管理;2011年12期
4 罗爱民;;信息系统体系结构的复杂性分析方法[J];计算机科学;2011年10期
5 梅松;;政府网络舆情监控系统的实现[J];信息技术;2011年09期
6 王青;成颖;巢乃鹏;;网络舆情监测及预警指标体系构建研究[J];图书情报工作;2011年08期
7 李云云;;浅析B/S和C/S体系结构[J];科学之友;2011年01期
8 赵靖;刘宏伟;崔刚;王慧强;;Analysis on testing and operational reliability of software[J];Journal of Harbin Institute of Technology;2008年03期
9 王维江;面向对象方法的程序设计简述[J];航空计算技术;2004年02期
本文编号:2673404
本文链接:https://www.wllwen.com/guanlilunwen/yunyingzuzhiguanlilunwen/2673404.html
最近更新
教材专著