基于混合架构云平台的环境噪声监测分析系统的设计及实现

发布时间：2025-02-06 12:56

　　对于环境噪声的监测分析在噪声污染控制与治理中有着重要的应用。环境噪声数据随着监测终端的发展呈爆炸式增长,给环境噪声数据的汇总、统计分析、存储、应用等都带来巨大挑战。传统的环境噪声监测与分析已经满足不了应用需求,需要与当前先进的大数据处理方法结合以实现环境噪声数据的应用。环境噪声具有数据源复杂、结构相异等特点,所以在数据的存储上不能采用传统的关系型数据库。由于数据的应用包括了噪声数据的实时应用和历史数据统计,所以在大数据处理框架的选择上要满足实际应用的需求。在此背景下,对环境噪声数据特性进行分析后,通过对Storm实时计算、Hadoop内部任务处理机制以及HBase非结构化数据存储技术的研究,提出了相应的环境噪声监测分析方案。本文的主要工作如下:1.提出基于混合架构云平台的环境噪声监测分析系统的总体架构,架构采用Storm平台实现环境噪声的实时处理,采用Hadoop中的HBase实现噪声数据的存储以及MapReduce编程实现历史噪声数据批处理。将实时处理与批处理方法以及分布式数据存储结合,实现噪声数据的高效计算及存储管理。2.在分析了环境噪声数据的特性及其应用需求后,提出了基于HBase...

【文章页数】：90 页

【学位级别】：硕士

【部分图文】：

图１－１城市昼间噪声源构成??目前，我国重点城区环境噪声的平均水平处于中等污染水平，超过６５％的居民正生活??

１研究背景??城市建设的步伐随着经济的发展不断加快，在城市建设过程中出现了一些阻碍城市的因素，如环境污染问题。在城市中，环境污染的类型可主要为大气污染、水污染、污染以及噪声污染四大类。近年来，人们对生活质量要求不断提高，维权的意识也强，环境保护部门收到的关于噪声污染的投诉日益增多....

图1一广州道路交通噪声图

?胡明月基于混合架构云平台的环境噪声监测分析系统的设计及实现?３＿??面积约７５平方千米。??我国的环境噪声自动监测系统大多布设于交通干道，通过建立灵活的环境噪声监测系??统网络对噪声进行采集，利用采集的数据动态地绘制局部噪声地图。深圳洛赛声学技术公??司在２００８年完成了覆盖面....

图3一5数据接入API数据流图

３．?４．?５基于Ｓｔｏｒｍ的噪声数据实时计算模块设计??噪声数据的实时处理阶段可以使用Ｓｔｏｒｍ中自带的ＡＰＩ实现实现Ｓｐｏｕｔ和Ｂｏｌｔ组件的??接口。如Ｓｐｏｕｔ中的ｎｅｘｔＴｕｐｌｅ（）函数用以实现Ｔｕｐｌｅ的读取和发射，而在Ｂｏｌｔ组件中，需??要通过ｅｘｅｃｕｔｅ（）....

图４－２辅助索引模型图??如图４－２所示，当以数据表的列限定符名Ｆ：Ｃ２＝Ｃ２２为查询条件时，系统根据索引表??先找到其对应的行键及ＲＫ２，然后在源表中查找Ｒｏｗｋｅｙ＝ＲＫ２对应列族Ｆ：Ｃ１的值即Ｃ１２

??（１）通过单个行键访问：ＨＢａｓｅ中对于单条数据的查询效率不高，一般通过ＨＢａｓｅ??提供的ｇｅｔ函数接口，按照行键、列族、列名及时间戳来获得。??（２）通过行键区间访问：ＨＢａｓｅ可以根据行键过滤器来设置行键的起始范围，对数据??集使用ＨＢａｓｅ提供的ｓｃａｎ函数进行部分扫....

本文编号：4030461