互联网环境下居民小区舆情监测分析系统的设计与实现

发布时间：2017-08-06 22:15

  本文关键词：互联网环境下居民小区舆情监测分析系统的设计与实现

  更多相关文章： 网络舆情 网页抓取 数据分析 舆情监测

【摘要】：在互联网技术的迅猛发展以及网民呈几何级数增长的社会背景下,网民日渐习惯通过网络平台表达对国家政治生态、社会建设、政府管理等问题的意愿与意见,特别是论坛、微博等网络平台已经成为各类信息、消息发布、传播、共享的主流媒介。对于政府部门来说,网络舆情工作是维护稳定的一项重要工作,如何对互联网信息进行有效监测也变得尤为重要。本文研究了国内外舆情监测产业的发展现状,在对现有舆情监测系统和LINUX系统、网络爬虫、MYSQL数据库、jieba分词等技术进行研究学习的基础上,把目前流行的舆情监控系统的设计理念与尝试搭建的小区舆情监测分析系统进行结合,力求在Web2.0环境下设计实现集舆情信息采集、处理、分析、上报等功能于一身的互联网舆情监测分析平台,为相关部门全面掌握网络舆情、争取处置主动权提供有效分析依据,为有关领导的正确决策奠定良好的信息支持。针对传统人工搜索存在着慢且不准等问题,本文搭建了一套基于LINUX操作系统的舆情监测分析系统,系统主要具备网页抓取、数据存储、数据分析和舆情预警展示功能。系统以辖区现有的双合家园小区业主论坛为实验对象,通过系统实际运行,实现对论坛用户新发主题和最新回帖中的内容进行实时监测,通过数据分析功能对获取发帖页面的信息来判断当前用户的新发主题和最新回帖中是否存在涉及政治敏感和小区住户重点关心的热词,并对经过词频分析或黑名单库比对成功的信息以邮件形式进行推送报警。最后,系统通过完成对双合家园小区业主论坛自2012年3月17日至2016年1月29日用户新发主题帖和回帖的监测工作来对系统进行测试,测试结果显示系统在实际的运行环境下能够稳定运行,对于异常、敏感词汇能够及时预警,具有较好的实用性,满足了本层级对舆情监测分析的设计需求。
【关键词】：网络舆情 网页抓取 数据分析 舆情监测
【学位授予单位】：北京工业大学
【学位级别】：硕士
【学位授予年份】：2016
【分类号】：TP391.3;TP274
【目录】：

• 摘要4-5
• Abstract5-8
• 第1章 绪论8-14
• 1.1 研究背景及意义8
• 1.2 国内外研究现状8-12
• 1.2.1 国外研究现状9-10
• 1.2.2 国内研究现状10-12
• 1.3 本文研究目标及主要工作12-13
• 1.3.1 研究目标12-13
• 1.3.2 主要工作13
• 1.4 本文的组织结构13-14
• 第2章 系统需求分析14-20
• 2.1 系统概述14-15
• 2.1.1 需求分析任务14-15
• 2.1.2 系统功能定位15
• 2.1.3 系统用户群定位15
• 2.2 系统功能需求分析15-17
• 2.3 系统性能需求分析17-18
• 2.4 系统运行要求18
• 2.5 本章小结18-20
• 第3章 舆情监测分析系统的设计20-28
• 3.1 系统总体设计20-25
• 3.1.1 网页抓取技术、编程语言和数据库的选择20-21
• 3.1.2 监测策略设计21-22
• 3.1.3 系统总体架构22-24
• 3.1.4 系统工作流程24-25
• 3.2 系统各模块设计25-27
• 3.2.1 网页抓取模块25-26
• 3.2.2 数据存储模块26
• 3.2.3 数据分析模块26-27
• 3.2.4 报警推送与数据展示模块27
• 3.3 本章小结27-28
• 第4章 舆情监测分析系统的实现28-48
• 4.1 网页抓取模块28-32
• 4.1.1 网页抓取模块的核心理念28
• 4.1.2 论坛网页抓取策略28-29
• 4.1.3 设置抓取队列流程29-30
• 4.1.4 抓取帖子主题和内容流程30-32
• 4.2 数据存储模块32-35
• 4.2.1 分布式数据存储系统选择32-33
• 4.2.2 分词模块33-34
• 4.2.3 数据存储过程34-35
• 4.3 数据分析模块35-45
• 4.3.1 数据分析的流程35-36
• 4.3.2 数据分析算法设计与优化36-45
• 4.4 报警信息推送与数据展示45-47
• 4.5 本章小结47-48
• 第5章 舆情监测分析系统的测试48-60
• 5.1 测试内容48-49
• 5.2 测试环境49
• 5.3 测试过程49-58
• 5.4 本章小结58-60
• 结论与展望60-62
• 参考文献62-66
• 致谢66

【相似文献】

中国期刊全文数据库 前10条

1 张锐，刘家庆，陈刚;东北电网多媒体频率监测分析系统的研制与开发[J];东北电力技术;1996年07期

2 ;“外资银行非现场监测分析系统”通过技术鉴定[J];中国金融电脑;2000年10期

3 科卞;高超风洞流态监测分析系统[J];电子科技大学学报;2000年01期

4 张家安;于晓明;张开生;田俊宏;;嵌入式睡眠监测分析系统研究与设计[J];计算机测量与控制;2011年01期

5 王晓娟,李宏,李心义,黄元忠;催化剂颗粒激光在线监测分析系统的研制[J];石油化工自动化;1999年03期

6 陈小松;刘丹;钱卫;王峥瀛;王德宽;王桂平;;SMA2000状态监测分析系统开发及其应用[J];水电站机电技术;2008年06期

7 陈小松;王峥瀛;梅林;杨叶平;王德宽;王桂平;;SMA2000状态监测分析系统开发及其应用[J];水电厂自动化;2008年03期

8 向科;李晖;刘海波;吴昌晟;;基于SMA2000状态监测分析系统的趋势预警系统[J];电力信息化;2009年09期

9 孙霞;李衡;杨一男;石乐;;GSM/WCDMA分组域监测分析系统设计[J];邮电设计技术;2011年09期

10 雷霆;黄太贵;李斌;汤进;;时间同步监测分析系统的开发与应用[J];电力系统自动化;2010年24期

中国重要会议论文全文数据库 前3条

1 邵高洁;;客户通话量动态监测分析系统的研发[A];河南省通信学会2005年学术年会论文集[C];2005年

2 胡昌斌;;动态红外在线监测分析系统在电力诊断中的应用[A];2010年云南电力技术论坛论文集（文摘部分）[C];2010年

3 陈小松;刘丹;钱卫;王峥瀛;王德宽;王桂平;;SMA2000状态监测分析系统开发及其应用[A];中国水力发电工程学会电力系统自动化专委会2008年年会暨学术交流会论文集[C];2008年

中国硕士学位论文全文数据库 前8条

1 郭建;基于智能眼镜的动态监测分析系统[D];中国海洋大学;2015年

2 崔铁虎;基于PXIe模块化仪器的GSM/WCDMA/LTE在线监测分析系统的设计与实现[D];东南大学;2015年

3 甄净;互联网环境下居民小区舆情监测分析系统的设计与实现[D];北京工业大学;2016年

4 朱岩松;电厂实时监测分析系统的设计与实现[D];吉林大学;2004年

5 丁洁莹;睡眠呼吸暂停综合症自动监测分析系统[D];南京理工大学;2008年

6 韩奎政;邹县电厂3#机组轴系组振动监测分析系统开发与应用[D];华北电力大学（河北）;2004年

7 张恒宇;大型机械设备远程监测分析系统的设计与研究[D];大连理工大学;2007年

8 孙庆;中小学学科教学质量监测分析系统设计与实现[D];上海交通大学;2013年

，

本文编号：631681