基于聚类与数据冷热的公共安全事件存储管理方法研究

发布时间：2020-06-05 18:40

【摘要】：公共安全事件关系到国计民生,信息时代对公共安全事件的及时感知和处理分析正变得日益重要。海量的社交网络数据中包含公共安全事件信息及非公共安全事件信息,这些信息混杂在一起存储,对舆情分析时对某个公共安全事件信息的精准查询形成了巨大的挑战。同时,事件是不断发展演化的,如何充分挖掘事件信息的访问局部性对事件信息进行关联性存储管理,对于事件的精准实时的查询分析,具有重要的意义。论文中设计实现了基于聚类和数据冷热的公共安全事件高效存储管理方法。一方面,使用局部模块度优化目前的社区划分算法,对获取到的网络信息进行关联。根据数据集类型的不同,针对新闻网页文本数据,计算不同文本节点之间的语义距离,并采用优化后的社区划分完成事件聚类;针对微博文本数据,利用信息熵构建关键词溯源图,再对溯源图社区划分实现事件聚类,提高事件聚类准确度,并减少时间开销。另一方面,利用事件信息的访问局部性原理,将聚类后的事件信息集中存储,并利用固态硬盘相比机械硬盘的性能优势将事件信息根据冷热进行分离存储,来进一步提升对公共安全事件的查询性能。实验结果表明,论文提出的聚类算法在针对新闻网页长文本和微博短文本的公共安全事件时,能取得聚类精确度94%的聚类效果。经过事件聚类和冷热存储处理后的数据,在后续的查询时,对比原始数据的精确查询,查询时间至少减少了52%。证明了该研究方法的有效性。
【学位授予单位】：华中科技大学
【学位级别】：硕士
【学位授予年份】：2019
【分类号】：D035;TP311.13

【相似文献】

相关期刊论文 前10条

1 慕丽娜;;突发事件之后,怎样疏导公民的恐慌心理[J];人民论坛;2017年05期

2 周延颖;黄勤;王一鸣;敬涌;;基于大数据的公共安全事件检测与防控[J];中国公共安全(学术版);2017年01期

3 郗云菲;;新媒体环境下重大公共安全事件信息公开问题——基于山东非法疫苗案的分析[J];天水行政学院学报;2017年01期

4 杨昌勇;奚洁人;马慧民;;跨界治理视域下城市公共安全事件的形成机理与治理对策——以S市踩踏事件为例[J];云南民族大学学报(哲学社会科学版);2017年04期

5 李立;;突发公共安全事件的民商事法律问题研究[J];法制博览;2017年27期

6 吴丹;;浅析新形势下突发公共安全事件的应急管理[J];科技经济导刊;2016年08期

7 黄海琳;;广西城市突发公共安全事件应急管理机制的完善[J];管理观察;2016年19期

8 尹凤山;;探讨基于突发公共安全事件的民法制度[J];法制博览;2015年23期

9 刘园园;徐志花;;突发公共安全事件中的政府危机管理研究——以上海外滩踩踏事件为例[J];项目管理技术;2015年10期

10 于茜;;大数据环境下突发公共安全事件网络舆情预警系统关键技术研究[J];数码世界;2019年12期

相关会议论文 前10条

1 呼东燕;;论突发公共安全事件中网络媒体的应对措施[A];第一届全国安全科学理论研讨会论文集[C];2007年

2 李晓安;;应对突发公共安全事件的制度体系建设[A];改革开放与理论创新——第二届北京中青年社科理论人才“百人工程”学者论坛文集[C];2008年

3 吴德桥;;改革开放进程中的公共安全管理——浅谈怎样避免人为公共安全事件频繁出现[A];“改革开放30年与贵州社会发展”学术研讨会暨贵州省社会学学会2008年学术年会论文集[C];2008年

4 周卫球;;建立健全公共安全机制 促进维护社会安定有序[A];湖北省行政管理学会2006年年会论文集[C];2007年

5 曾益武;;公共安全视野下的行政问责制建设[A];“建设服务型政府的理论与实践”研讨会暨中国行政管理学会2008年年会论文集[C];2008年

6 王彦吉;李文君;;公共安全中的化学[A];中国化学会第二十五届学术年会论文摘要集（上册）[C];2006年

7 杨阳;彭宏贵;杨贞文;尹维权;;GIS在突发公共安全事件中的应用[A];中国地理信息系统协会第四次会员代表大会暨第十一届年会论文集[C];2007年

8 王二平;;有关突发公共事件分类问题的思考[A];新观点新学说学术沙龙文集15：发展中的公共安全科技：问题与思考[C];2007年

9 程宪华;;从社会安全危机审视政府职能变革[A];政府改革与行政能力建设研讨会论文集[C];2005年

10 于晓娟;;公共安全事件的网络舆情防控路径研究——以重庆公交坠江事件为例[A];2019互联网安全与治理论坛论文集[C];2019年

相关重要报纸文章 前10条

1 本报记者 田文生;院士领衔把脉公共安全事件[N];中国青年报;2011年

2 北京市大兴区人民检察院 徐金海;将重大公共安全事件纳入公益诉讼范围[N];检察日报;2020年

3 记者 朱杰 通讯员 陈慧 朱勋;扎实推动安全生产秋季攻势 切实防范公共安全事件发生[N];邵阳日报;2018年

4 孙锡云;第一责任人落实了才是真落实[N];中国安全生产报;2017年

5 记者 邹博宁;我市确保安全生产工作稳定向好态势[N];齐齐哈尔日报;2017年

6 本报评论员;敢于直面问题 敢于动真碰硬[N];新华日报;2017年

7 记者 潘旭 黄安琪;城市公共安全事件必须“零容忍”[N];新华每日电讯;2013年

8 耿银平(河南);院士把脉公共安全事件的科学纠偏意义[N];嘉兴日报;2011年

9 王陵生;安徽省厅机关战训队成立[N];人民公安报;2008年

10 黄久平邋雍立信;公共安全事件思考[N];医药经济报;2008年

相关博士学位论文 前2条

1 郭翔;水污染公共安全事件信息扩散与耦合机理研究[D];华中科技大学;2010年

2 吉慧;公共安全视角下的体育场馆设计研究[D];华南理工大学;2013年

相关硕士学位论文 前10条

1 李豫立;基于聚类与数据冷热的公共安全事件存储管理方法研究[D];华中科技大学;2019年

2 王唯;基于微博的公共安全事件监测分析系统设计与实现[D];重庆大学;2018年

3 席莹;基于卷积神经网络的公共安全事件检测与分析[D];云南大学;2017年

4 王赛君;面向公共安全的态势推演系统研究与关键模块实现[D];东南大学;2018年

5 陈勇;公共安全事件中警察与媒体协同应对研究[D];南京师范大学;2017年

6 林善通;公交车突发公共安全事件对策研究[D];福建师范大学;2016年

7 李浩然;寒地城市突发公共安全事件应急体系研究[D];哈尔滨理工大学;2012年

8 贾艳;公共安全事件应急符号的设计研究[D];解放军信息工程大学;2010年

9 巩敏;民航突发公共安全事件应急管理机制研究[D];武汉理工大学;2008年

10 籍文锦;学校在学生公共安全事件中的责任[D];大连海事大学;2011年

，

本文编号：2698451