面向农业物联网应用层的SCADA系统性能优化研究

发布时间：2017-04-30 05:03

  本文关键词：面向农业物联网应用层的SCADA系统性能优化研究，由笔耕文化传播整理发布。

【摘要】：物联网技术快速发展并在农业领域得到了广泛应用。随着农业物联网应用规模的扩大和网络通信量的增加,农业物联网应用层SCADA系统会遇到感知识别采集终端高并发的数据访问、数据标准异构导致通信协议消息格式在通用性、结构化和效率上难以实现平衡以及针对数据流快速响应和实时处理等问题。本文将农业SCADA系统抽象为一般功能模型,并根据数据流动过程分别研究数据采集、数据处理和数据存储子系统相关设计和优化技术,旨在提高系统通信并发性能的同时优化系统的数据处理能力。本文主要完成了以下几项工作：1、针对农业物联网应用层SCADA系统的通用性,将系统抽象为功能模型,分别从基于windows的网络通信模型、基于应用层协议和数据流处理算法的数据处理过程、基于连接池和查询优化的数据存储过程,探讨了提高系统数据处理能力的技术。2、针对完成端口机制中的信息定位、资源管理、内存页锁定和数据包处理等问题进行分析,优化了基于线程私有链表的对象池,提出了基于无锁数据结构、CAS机制和任务窃取的线程私有链表对象池优化策略,解决了线程池对共享资源的并行访问效率低的问题。3、针对数据标准不一致引起的通信协议消息格式混乱问题,提出了基于JSON和TLV的数据格式,解决了传感数据传输及解析低效问题,使数据传输和解析过程在占用带宽／内存和响应时间之间取得更好平衡；同时,针对农业物联网数据流的特点和处理需求,提出了适用于农业SCADA系统的数据流实时处理算法。4、设计并搭建了一种面向农业物联网应用层的农业SCADA系统,实现了农场的远程管理。系统验证了SCADA模型的通用性,解决了SCADA系统在面对大规模数据并发访问和处理时的性能问题。经过实际应用表明,在面对高速率数据访问请求时,对网络通信优化提高了系统并发连接网关的数量和通信效率,而协议格式优化提高了数据传输效率和数据包封装／解析效率,通过数据流处理算法降低系统的内存使用率同时提高输出结果的实时更新效率。
【关键词】：农业物联网 SCADA系统 IOCP 无锁数据结构 JSON TLV 数据流处理
【学位授予单位】：浙江大学
【学位级别】：硕士
【学位授予年份】：2016
【分类号】：S126;TN929.5;TP391.44
【目录】：

• 致谢5-6
• 摘要6-7
• Abstract7-11
• 1 绪论11-17
• 1.1 选题的背景和意义11-12
• 1.2 国内外研究现状12-15
• 1.3 论文的研究内容15
• 1.4 论文的结构安排15-17
• 2 基于Windows平台的通用SCADA系统模型研究17-43
• 2.1 问题的提出17
• 2.2 通用SCADA系统模型分析17-18
• 2.3 网络通信子系统的研究18-31
• 2.3.1 网络通信相关技术19-21
• 2.3.2 网络IO模型分析21-31
• 2.4 数据处理子系统研究31-36
• 2.4.1 应用层通信协议31-32
• 2.4.2 数据流处理32-36
• 2.5 数据存储子系统研究36-42
• 2.5.1 数据存储相关技术36-38
• 2.5.2 数据库的设计38-40
• 2.5.3 数据库访问的研究40-42
• 2.6 本章小结42-43
• 3 基于IOCP的网络通信性能优化43-65
• 3.1 问题的提出43-44
• 3.2 完成端口模型的关键问题分析44-50
• 3.3 基于线程私有链表的对象池优化50-64
• 3.3.1 对象池50-53
• 3.3.2 并发数据结构53-54
• 3.3.3 无锁对象池的设计54-55
• 3.3.4 无锁对象池的实现55-59
• 3.3.5 算法的验证分析59-64
• 3.4 本章小结64-65
• 4 数据处理相关的研究与优化65-87
• 4.1 问题的提出65-66
• 4.2 通信协议中的数据格式研究与优化66-81
• 4.2.1 基于二进制格式的消息格式研究66-69
• 4.2.2 基于文本格式的消息格式研究69-77
• 4.2.3 基于JSON和TLV的消息格式优化77-81
• 4.3 基于滑动窗口的数据流处理算法设计81-86
• 4.3.1 数据流处理需求81-82
• 4.3.2 数据流处理模型82-83
• 4.3.3 数据流处理算法83-86
• 4.4 本章小结86-87
• 5 面向农业物联网应用层的SCADA系统设计与实现87-116
• 5.1 系统设计87-91
• 5.1.1 需求分析87-88
• 5.1.2 系统结构88-90
• 5.1.3 开发平台概述90-91
• 5.2 系统实现91-115
• 5.2.1 系统主要模块的实现类图91-93
• 5.2.2 面向网关的网络通信模块93-98
• 5.2.3 面向远程访问的网络通信模块98-101
• 5.2.4 数据存储模块101-108
• 5.2.5 数据处理模块108-110
• 5.2.6 消息队列110-111
• 5.2.7 可视化界面111-115
• 5.3 本章小结115-116
• 6 总结与展望116-118
• 6.1 总结116-117
• 6.2 展望117-118
• 参考文献118-123
• 研究生期间完成工作123

【相似文献】

中国期刊全文数据库 前10条

1 马兴;王巍;韩洁;袁顺全;李鹏;庞纯伟;张靖康;王海豹;;以物联网技术加快实现农业现代化[J];山西农业科学;2011年04期

2 胡平霞;;物联网及其应用探索[J];湖南环境生物职业技术学院学报;2011年02期

3 司凯;臧亮;;物联网在农业中的应用研究[J];农村经济与科技;2011年08期

4 梁恒;陈强;;我国农村物联网应用与发展对策研究[J];现代商贸工业;2013年10期

5 李春勇;;物联网及其在林业中的应用[J];北京农业;2013年18期

6 张文娟;;农业物联网 看上去很美[J];中国农村科技;2013年10期

7 韩华威;;朗坤物联网 智慧农业“布道者”[J];中国农村科技;2013年10期

8 黄盛杰;金芳;;农业物联网技术的发展和应用[J];江苏农机化;2013年05期

9 ;天津:物联网应用在温室领域“开花结果”[J];蔬菜;2013年11期

10 陈艺;;农业物联网技术应用探讨[J];农业与技术;2013年08期

中国重要会议论文全文数据库 前10条

1 柯欣;;物联网的智慧从何而来[A];两化融合与物联网发展学术研讨会论文集[C];2010年

2 李晨熙;;物联网的发展状况与趋势[A];两化融合与物联网发展学术研讨会论文集[C];2010年

3 朱顺强;;中国物联网发展状况分析[A];中国通信学会2010年光缆电缆学术年会论文集[C];2010年

4 李文增;李拉;;对我国物联网产业进一步加快发展的对策研究[A];2010年度京津冀区域协作论坛论文集[C];2010年

5 曾跃;罗斌;周东晓;;关注物联网发展:冷静分析,务实前行[A];两化融合与物联网发展学术研讨会论文集[C];2010年

6 张金鑫;魏峻旭;;我国物联网发展现状研究[A];两化融合与物联网发展学术研讨会论文集[C];2010年

7 肖良颜;余翔宇;;广东省物联网建设和发展的思考[A];广东通信2010青年论坛优秀论文集[C];2010年

8 曹玉旺;张炎明;;浅析物联网下智慧城市的发展策略[A];融合与创新——中国通信学会通信管理委员会第29次学术研讨会论文集[C];2011年

9 陈卫国;;超级物联网:中国物联网发展第三条道路[A];新观点新学说学术沙龙文集47：物联网产业与区域经济发展[C];2010年

10 王继祥;;避免浮躁气息,求同存异推进物联网应用[A];新观点新学说学术沙龙文集47：物联网产业与区域经济发展[C];2010年

中国重要报纸全文数据库 前10条

1 本报记者 张煜;物联网：下一个经济增长点？[N];中国电子报;2009年

2 本报记者 魏刚;物联网：地球的神经元[N];北京科技报;2009年

3 本报通讯员 张前　本报记者 陈晓春;神奇物联网,大步走近我们的生活[N];新华日报;2009年

4 蔡玉高　刘巍巍;我国科研机构加紧研发物联网技术[N];人民邮电;2009年

5 记者 付秋实;物联网,危机催生的新技术[N];金融时报;2009年

6 朱小兵;物联网不可一阵风[N];计算机世界;2009年

7 本报记者 谷慧;物联网掘金潮:前夜突围[N];中国经营报;2009年

8 本报记者 张丽娅　陈薇亦 实习生 方卿;“物联网”生活令人憧憬[N];江苏经济报;2009年

9 工业和信息化部 通信科技委委员 侯自强;物联网仅仅才开始[N];计算机世界;2009年

10 本报记者 余建斌　整理 刘先云;物联网,智能改变生活[N];人民日报;2009年

中国博士学位论文全文数据库 前10条

1 董新平;物联网产业成长研究[D];华中师范大学;2012年

2 苏美文;物联网产业发展的理论分析与对策研究[D];吉林大学;2015年

3 邓雪峰;设施农业物联网系统建模与模型验证[D];中国农业大学;2016年

4 王峰;物联网数据处理若干关键问题研究[D];吉林大学;2016年

5 郑欣;物联网商业模式发展研究[D];北京邮电大学;2011年

6 周明;物联网应用若干关键问题的研究[D];北京邮电大学;2014年

7 蒲海涛;物联网环境下基于上下文感知的智能交互关键技术研究[D];山东科技大学;2011年

8 孙运雷;物联网服务质量动态保障方法研究[D];北京邮电大学;2014年

9 吴亮;物联网技术服务采纳与个人隐私信息影响研究[D];电子科技大学;2011年

10 王军平;基于物联网的服务提交关键技术与系统的研究[D];北京邮电大学;2013年

中国硕士学位论文全文数据库 前10条

1 关勇;物联网行业发展分析[D];北京邮电大学;2010年

2 刘鹏程;物联网标准体系构建研究[D];北京交通大学;2011年

3 黄迪;物联网的应用和发展研究[D];北京邮电大学;2011年

4 曹自立;物联网产业发展的驱动因素研究[D];南京邮电大学;2012年

5 周桄召;我国物联网产业布局及对策研究[D];南京邮电大学;2012年

6 覃敏杰;物联网产业发展影响研究[D];北京邮电大学;2012年

7 程钰杰;我国物联网产业发展研究[D];安徽大学;2012年

8 唐力;物联网伦理问题探究[D];太原科技大学;2012年

9 宁金芳;从虚拟到实在：对物联网的哲学探究[D];中南大学;2012年

10 周洁;物联网环境下我国政府公共服务的研究[D];西南交通大学;2012年

  本文关键词：面向农业物联网应用层的SCADA系统性能优化研究，，由笔耕文化传播整理发布。

本文编号：336272