智慧渔业大数据平台框架及关键技术研究

发布时间：2024-12-26 04:50

　　随着物联网、云计算、大数据技术的发展,我国渔业数据量正在迅速积累膨胀,这对于渔业行业来说是机遇也是挑战。经调研,现有的渔业信息化平台提供了较为完善的数据检索、数据展示等服务,但是各种渔业数据之间相互孤立,忽略了数据间的相互关系和实际价值,远远没有达到渔业数据价值利用的最大化需求。因此,为了更好的分析大规模渔业数据之间的关系,充分利用渔业数据资源的价值,并解决目前我国渔业信息化相对落后、数据分析利用率低、易形成数据孤岛等问题,本文设计了基于Hadoop分布式架构的智慧渔业大数据平台。平台对海量渔业生产数据进行存储,并通过大数据相关技术、神经网络算法分析数据,生成相应的数据分析模型,对渔业中的水产养殖产量、养殖水质分析评价、渔业灾害等重要领域进行分析和预测,最终向政府、渔业相关单位、涉渔企业、科研人员、渔业从业人员等提供所需的信息化服务。文章结合Hadoop大数据技术,从渔业生产环境和行业特点出发,为智慧渔业大数据平台设计了四层体系架构,针对渔业中水产养殖环境复杂、养殖产量影响因素多且难以预测的问题,利用具有强大非线性映射能力的BP神经网络作为数据分析方法,分析水产养殖要素数据之间复杂的非线...

【文章页数】：83 页

【学位级别】：硕士

【部分图文】：

图2-1Hadoop平台结构图

图2-1Hadoop平台结构图Figure2-1HadoopPlatformArchitecture.HDFS分布式文件系统作为Hadoop生态圈的基础，HDFS使用流式数据访问模式进行大型文件存储适合在廉价的计算机集群上进行部署。HDFS具有以下几个特点：1....

图2-2HDFS架构图

图2-2HDFS架构图Figure2-2HDFSArchitectureDiagram.ameNodemeNode被称为名字节点，它是整个HDFS主从架构中最为重要着整个分布式文件系统的目录信息，目录中的信息分别以命名空age）和命名空间编辑日志（EditLo....

图2-3HDFS读写流程图

图2-3HDFS读写流程图Figure2-3HDFSreadandwriteflowchart.在智慧渔业大数据平台中，对于养殖对象等视频流数据使用HDFS进行存储，可以方便视频数据的读取和分析。2.1.3HBase分布式数据库系统渔业行业中每时每刻产....

图2-4HBase存储过程

图2-3HDFS读写流程图Figure2-3HDFSreadandwriteflowchart.渔业大数据平台中，对于养殖对象等视频流数据使用HDFS进频数据的读取和分析。分布式数据库系统业中每时每刻产生的各种生产数据呈爆炸式增长，这些数据若据库存储很难....

本文编号：4020559