电能质量数据接入与管理系统研究及实现
发布时间：2021-06-08 03:45
电能质量管理是指对电网传输电能的质量信息进行监测、分析以及相应的电能质量异常事件的治理,其对保障电网稳定安全运行和用电服务可靠优质具有重要作用。随着国家电网交直流输电建设及各类新能源发电和高铁等大型用电客户需求的提升,传统单点、单线路和有限区域的电能质量监测治理已无法满足需求,迫切需要形成对广域电网的电能质量监测。特别是随着所积累的电能质量数据的急剧膨胀,也暴露出现有系统存在的数据存储可拓展性不高、数据接入与处理能力差以及统计分析方法对于分散的数据无法得到全局监测结果等问题。为此,迫切需要针对广域电能质量管理需求,利用新兴的大数据技术对现有电能质量管理系统进行改进和发展。通过搭建基于大数据平台的电能质量数据接入与管理系统,实现了广域电网中分层次的监测数据的高可靠性汇聚接入以及面向电能质量治理的电能质量监测大数据统计分析功能。本文的主要研究工作如下:1.从大数据处理技术、电能质量监测与分析的角度出发分析了国内外研究现状,详细分析系统的应用前景之后,对能应用于电能质量管理业务的大数据技术进行适应性选择。2.根据当前电网电能质量数据的特点和类型,对电能质量数据实际规模做出详细评估,结合国家电...
【文章来源】：北方工业大学北京市
【文章页数】：73 页
【学位级别】：硕士
【部分图文】：
指标统计模块
第四章电能质量数据接入与管理系统设计24综合展示包括全网概览、指标统计、台账信息。具体可见下图：图4-5综合展示模块4.2核心数据处理流程核心数据主要包括两类，第一类是原始监测数据，第二类是经过统计计算后的结果数据。对核心数据的处理主要包括数据接入和计算分析两部分，本小节中提到的数据皆为对原始监测数据的处理。4.2.1数据接入流程该电能质量数据汇集接入系统的设计，主要包括历史数据接入和实时数据接入两部分。4.2.1.1历史数据接入流程历史数据汇集接入过程主要包括：（1）从已有各个省网记录的表中获取所有省网SFTP的连接及配置信息，综合展示全网概览展示监测点分布情况展示监测点在线率指标统计全网各项指标柱状图全网监测指标实时值展示全网监测指标实时趋势图台帐信息展示全网监测点总数展示全网监测终端总数以双柱状图展示各省监测点总数以饼图展示各省监测点总数监测对象类型的分类情况以饼图的形式展示监测终端数量按厂家划分的情况
第四章电能质量数据接入与管理系统设计25包括访问IP、端口、用户名、密码等信息。（2）以Client_ftp=1举例，通过对连接配置信息的比对，得到Client_ftp=1的省网SFTP，把其作为当前收取数据的对象后与该省网SFTP建立通信并获取该省网SFTP的文件所有信息，包括文件名称、大孝目录等详细信息，并通过文件的大小计算出拉取数据所需要的间隔时间。（3）将省网SFTP的配置信息、文件信息和拉取数据所需时间间隔等一并发送给数据收取程序。（4）成功建立socket连接后开始下载压缩文件并解压，将不同类型的文件存储到不同的目标数据库中，通常将文本文件存储到HBase中，波形文件存储到HDFS中，中间结果记录到MySQL中。详情见下图：图4-6历史数据接入流程图4.2.1.2实时数据接入流程Kafka有高可用，高吞吐量等特点，实时数据接入主要采用Kafka技术，主要流程有：（1）总部创建消费者后与当前省网Kafka建立连接，获取省网Kafka的地址、配置信息(主题，消费者个数)和主题topic。（2）按topic接收流数据，并存储到HBase中。详情见下图：
【参考文献】：
期刊论文
[1]基于Spark的层次聚类算法的并行化研究[J]. 余胜辉,李玲娟. 计算机技术与发展. 2020(06)
[2]基于大数据的主网生产运维数据分析系统设计[J]. 吴应双,陈锐,曹杰,刘明顺. 电力大数据. 2019(12)
[3]电力系统典型电能质量问题解决方案探讨[J]. 朱明星. 电气应用. 2019(09)
[4]电压暂降治理效果评价指标体系及综合评价模型[J]. 丁凯,李伟,谢佳妮,汪颖. 科学技术与工程. 2019(25)
[5]WEB可视化技术在电网大数据场景下的应用研究[J]. 潘玉春,胡剑锋,朱玉付. 电力大数据. 2019(03)
[6]电力通信网大数据应用场景开发及试点应用[J]. 耿俊成,张小斐,郭志民,吴博,吕顺利. 电力大数据. 2019(02)
[7]智能电网大数据处理技术现状[J]. 张啸宇. 中国科技信息. 2018(21)
[8]电能质量监测系统研究现状及发展趋势[J]. 赵磊. 中国战略新兴产业. 2018(40)
[9]大数据技术在电力通信网的研究与应用[J]. 林炳花. 电力大数据. 2018(05)
[10]电能质量在线监测系统的设计与实现[J]. 李林辉,杨军飞,谈军,吴猛,殷成才. 中国电力. 2017(05)
博士论文
[1]基于大数据技术的电站机组节能优化研究[D]. 刘炳含.华北电力大学(北京) 2019
硕士论文
[1]基于大数据的电能质量分析应用研究[D]. 娄国娇.长春工业大学 2019
[2]基于云平台的需求侧用户用电大数据分析[D]. 李敏.上海电机学院 2019
[3]电能质量数据存储与综合评估方法研究[D]. 陶耕宇.哈尔滨工业大学 2018
[4]基于大数据的电力设备运行数据分析系统的设计与实现[D]. 梁少培.华北电力大学 2018
[5]用电负荷大数据分析预测系统的设计与实现[D]. 臧淑娟.山东大学 2018
[6]基于Hadoop的电网数据应用算法优化研究[D]. 吴正航.华南理工大学 2017
[7]基于Hadoop的海量电能质量监测数据云平台的研究[D]. 周艳玲.西安科技大学 2017
[8]基于DSP和C/S架构的电能质量监测系统研究[D]. 胡雪莹.河北农业大学 2014
[9]电能质量在线监测与智能信息系统建设及应用研究[D]. 弭勇.华北电力大学 2014
[10]电能质量监测海量数据分析研究[D]. 陈海涛.华南理工大学 2013
本文编号：3217623
【文章来源】：北方工业大学北京市
【文章页数】：73 页
【学位级别】：硕士
【部分图文】：
指标统计模块
第四章电能质量数据接入与管理系统设计24综合展示包括全网概览、指标统计、台账信息。具体可见下图：图4-5综合展示模块4.2核心数据处理流程核心数据主要包括两类，第一类是原始监测数据，第二类是经过统计计算后的结果数据。对核心数据的处理主要包括数据接入和计算分析两部分，本小节中提到的数据皆为对原始监测数据的处理。4.2.1数据接入流程该电能质量数据汇集接入系统的设计，主要包括历史数据接入和实时数据接入两部分。4.2.1.1历史数据接入流程历史数据汇集接入过程主要包括：（1）从已有各个省网记录的表中获取所有省网SFTP的连接及配置信息，综合展示全网概览展示监测点分布情况展示监测点在线率指标统计全网各项指标柱状图全网监测指标实时值展示全网监测指标实时趋势图台帐信息展示全网监测点总数展示全网监测终端总数以双柱状图展示各省监测点总数以饼图展示各省监测点总数监测对象类型的分类情况以饼图的形式展示监测终端数量按厂家划分的情况
第四章电能质量数据接入与管理系统设计25包括访问IP、端口、用户名、密码等信息。（2）以Client_ftp=1举例，通过对连接配置信息的比对，得到Client_ftp=1的省网SFTP，把其作为当前收取数据的对象后与该省网SFTP建立通信并获取该省网SFTP的文件所有信息，包括文件名称、大孝目录等详细信息，并通过文件的大小计算出拉取数据所需要的间隔时间。（3）将省网SFTP的配置信息、文件信息和拉取数据所需时间间隔等一并发送给数据收取程序。（4）成功建立socket连接后开始下载压缩文件并解压，将不同类型的文件存储到不同的目标数据库中，通常将文本文件存储到HBase中，波形文件存储到HDFS中，中间结果记录到MySQL中。详情见下图：图4-6历史数据接入流程图4.2.1.2实时数据接入流程Kafka有高可用，高吞吐量等特点，实时数据接入主要采用Kafka技术，主要流程有：（1）总部创建消费者后与当前省网Kafka建立连接，获取省网Kafka的地址、配置信息(主题，消费者个数)和主题topic。（2）按topic接收流数据，并存储到HBase中。详情见下图：
【参考文献】：
期刊论文
[1]基于Spark的层次聚类算法的并行化研究[J]. 余胜辉,李玲娟. 计算机技术与发展. 2020(06)
[2]基于大数据的主网生产运维数据分析系统设计[J]. 吴应双,陈锐,曹杰,刘明顺. 电力大数据. 2019(12)
[3]电力系统典型电能质量问题解决方案探讨[J]. 朱明星. 电气应用. 2019(09)
[4]电压暂降治理效果评价指标体系及综合评价模型[J]. 丁凯,李伟,谢佳妮,汪颖. 科学技术与工程. 2019(25)
[5]WEB可视化技术在电网大数据场景下的应用研究[J]. 潘玉春,胡剑锋,朱玉付. 电力大数据. 2019(03)
[6]电力通信网大数据应用场景开发及试点应用[J]. 耿俊成,张小斐,郭志民,吴博,吕顺利. 电力大数据. 2019(02)
[7]智能电网大数据处理技术现状[J]. 张啸宇. 中国科技信息. 2018(21)
[8]电能质量监测系统研究现状及发展趋势[J]. 赵磊. 中国战略新兴产业. 2018(40)
[9]大数据技术在电力通信网的研究与应用[J]. 林炳花. 电力大数据. 2018(05)
[10]电能质量在线监测系统的设计与实现[J]. 李林辉,杨军飞,谈军,吴猛,殷成才. 中国电力. 2017(05)
博士论文
[1]基于大数据技术的电站机组节能优化研究[D]. 刘炳含.华北电力大学(北京) 2019
硕士论文
[1]基于大数据的电能质量分析应用研究[D]. 娄国娇.长春工业大学 2019
[2]基于云平台的需求侧用户用电大数据分析[D]. 李敏.上海电机学院 2019
[3]电能质量数据存储与综合评估方法研究[D]. 陶耕宇.哈尔滨工业大学 2018
[4]基于大数据的电力设备运行数据分析系统的设计与实现[D]. 梁少培.华北电力大学 2018
[5]用电负荷大数据分析预测系统的设计与实现[D]. 臧淑娟.山东大学 2018
[6]基于Hadoop的电网数据应用算法优化研究[D]. 吴正航.华南理工大学 2017
[7]基于Hadoop的海量电能质量监测数据云平台的研究[D]. 周艳玲.西安科技大学 2017
[8]基于DSP和C/S架构的电能质量监测系统研究[D]. 胡雪莹.河北农业大学 2014
[9]电能质量在线监测与智能信息系统建设及应用研究[D]. 弭勇.华北电力大学 2014
[10]电能质量监测海量数据分析研究[D]. 陈海涛.华南理工大学 2013
本文编号：3217623
本文链接：https://www.wllwen.com/kejilunwen/shengwushengchang/3217623.html
最近更新
教材专著
