基于大数据的网络舆情分析系统

发布时间：2018-03-20 11:04

  本文选题：大数据　切入点：网络舆情　出处：《现代电子技术》2017年24期 　论文类型：期刊论文

【摘要】：针对互联网数据快速增长和舆情信息飞速传播的问题,提出一种基于大数据的网络舆情分析系统。该系统包括数据采集、预处理、分析和报告汇总四个模块,实现舆情信息的全网自动搜索与采集,大规模舆情数据的格式化存储以及舆情信息的分析、统计汇总等功能。该系统还使用Hadoop平台进行数据处理,并使用HDFS分布式文件系统存储舆情数据,使用MapReduce技术完成舆情分析和报告。仿真结果表明,该系统有助于及时、准确地分析网络舆情,能较好地满足网络舆情分析的需求。
[Abstract]:Aiming at the problem of the rapid growth of Internet data and the rapid spread of public opinion information, a network public opinion analysis system based on big data is proposed. The system includes four modules: data collection, preprocessing, analysis and report summary. The system can automatically search and collect public opinion information on the whole network, format and store large-scale public opinion data, analyze and collect public opinion information, etc. The system also uses Hadoop platform for data processing. The HDFS distributed file system is used to store the public opinion data and the MapReduce technology is used to complete the public opinion analysis and report. The simulation results show that the system is helpful to analyze the network public opinion in time and accurately, and can better meet the needs of the network public opinion analysis.
【作者单位】： 中国软件与技术服务股份有限公司;
【分类号】：TP311.13;TP393.09

【相似文献】

相关期刊论文 前10条

1 宋占茹;;图书馆开展网络舆情分析工作初探[J];情报探索;2010年08期

2 余辉;黄永峰;;跨媒体多源网络舆情分析系统设计与实现[J];数据通信;2014年01期

3 李勇;刘战东;;面向网络舆情分析系统的本体应用[J];西安石油大学学报(自然科学版);2014年01期

4 李勇;张克亮;李伟刚;;基于微博的网络舆情分析系统设计[J];计算技术与自动化;2013年02期

5 王岚;;大数据时代舆情分析对图书馆信息服务增值的可行性[J];青春岁月;2013年19期

6 吕洪波;姚锦峰;梁飞;;网络舆情分析系统信息清理的研究[J];硅谷;2009年08期

7 熊祖涛;;针对微博数据的信息抽取与舆情分析[J];信息系统工程;2013年03期

8 张焕明;;网络舆情分析系统的研究与设计[J];微计算机信息;2010年18期

9 刘松;张德贤;;基于Web挖掘的粮食舆情分析应用研究[J];电脑知识与技术;2013年10期

10 黄蔚;李戴维;;基于MapReduce的网络舆情分析系统的设计与实现[J];信息技术;2014年07期

相关会议论文 前2条

1 宋占茹;;图书馆网络舆情分析工作新探[A];华北地区高校图协第二十四届学术年会论文（文章）汇编[C];2010年

2 梁飞;吕洪波;姚锦峰;;舆情分析中语料库降维[A];2008'中国信息技术与应用学术论坛论文集（一）[C];2008年

相关重要报纸文章 前1条

1 汤兴 河南羚锐制药股份有限公司;网络信息化时代 企业如何应对网络舆情[N];企业家日报;2013年

相关博士学位论文 前1条

1 冯时;面向网络舆情分析的观点挖掘关键技术研究[D];东北大学;2011年

相关硕士学位论文 前10条

1 姜朋;山东大学舆情分析系统的设计与实现[D];山东大学;2015年

2 唐霞;Hadoop调度器优化及其在舆情分析中的应用[D];北京化工大学;2015年

3 冯佳明;深度词汇网络学习舆情监测关键技术的研究[D];北京化工大学;2015年

4 王晔;面向舆情分析的skyline查询技术研究与实现[D];国防科学技术大学;2013年

5 高卫民;城市公安网络舆情分析系统的设计与开发[D];天津大学;2014年

6 罗晶;校园舆情分析中的意见挖掘技术研究[D];东南大学;2015年

7 谭造乐;基于Spark的舆情分析架构研究[D];广东工业大学;2016年

8 徐嘉成;基于k-means聚类和TF-IDF的新浪微博舆情分析[D];辽宁科技大学;2016年

9 林鉴周;微博舆情分析技术研究及系统实现[D];广东技术师范学院;2016年

10 李宇博;基于文本聚类技术的网络舆情分析系统的研究与应用[D];天津工业大学;2016年

，

本文编号：1638795