一种基于Spark和聚类分析的辨识电力系统不良数据新方法

发布时间：2017-11-09 02:11

  本文关键词：一种基于Spark和聚类分析的辨识电力系统不良数据新方法

  更多相关文章： Spark 聚类 K-means 电力系统 不良数据 负荷曲线分类

【摘要】：随着电力系统智能化建设的不断深入和推进,电力系统数据呈现海量化、高维化的趋势。针对电力系统中的不良数据将导致电力系统状态估计结果的准确性降低,而传统聚类算法处理海量高维数据时单机计算资源不足,近年来较流行的Map Reduce框架不能有效处理频繁迭代计算等问题,提出一种基于Spark的并行K-means算法辨识不良数据的新方法。以某一节点电力负荷数据为研究对象,运用基于Spark的并行K-means聚类算法提取出日负荷特征曲线,分别对输电网状态估计中的不良数据进行检测和辨识。选用EUNITE提供的真实电力负荷数据进行实验,结果表明此方法能有效提高状态估计结果的准确性,与基于Map Reduce框架的方法相比,具有更好的加速比、扩展性,能更好地处理电力系统的海量数据。
【作者单位】： 华北电力大学控制与计算机工程学院;
【分类号】：TM76
【正文快照】： 0引言随着智能电网的迅速发展,电力系统的数据呈指数级增长,其结构和运行模式也越来越复杂,因此对系统运行的可靠性、安全性和稳定性也就提出了更高的要求[1-3]。电力系统状态估计是电力系统信息管理系统中一个重要的组成部分[4]。由于客观原因,除了正常的数据噪声,各信息采集

【参考文献】

中国期刊全文数据库 前5条

1 李建江;崔健;王聃;严林;黄义双;;MapReduce并行编程模型研究综述[J];电子学报;2011年11期

2 宋亚奇;周国亮;朱永利;李莉;王德文;;云平台下并行总体经验模态分解局部放电信号去噪方法[J];电工技术学报;2015年18期

3 黎祚;周步祥;林楠;;基于模糊聚类与改进BP算法的日负荷特性曲线分类与短期负荷预测[J];电力系统保护与控制;2012年03期

4 朱倩雯;叶林;赵永宁;郎燕生;宋旭日;;风电场输出功率异常数据识别与重构方法研究[J];电力系统保护与控制;2015年03期

5 孙雅明,王晨力,张智晟,刘尚伟;基于蚁群优化算法的电力系统负荷序列的聚类分析[J];中国电机工程学报;2005年18期

【共引文献】

中国期刊全文数据库 前10条

1 李慧;王来运;;基于混沌蚁群算法的电力短期负荷预测[J];北京信息科技大学学报(自然科学版);2011年04期

2 郑晓雨;马进;贺仁睦;唐永红;;基于模型激励响应的负荷分类及泛化能力[J];电工技术学报;2009年02期

3 李智勇;吴晶莹;吴为麟;宋保明;;基于自组织映射神经网络的电力用户负荷曲线聚类[J];电力系统自动化;2008年15期

4 张智晟;孙雅明;张世英;;基于蚁群算法的容错RBF-NN诊断模型性能评估[J];电力系统及其自动化学报;2007年02期

5 刘建华;孟颖;谭智;;基于蚁群优化K-medoids的变电站特性聚类研究[J];电气技术;2012年02期

6 张智晟;孙雅明;张世英;赵艳;;基于数据挖掘多层次细节分解的负荷序列聚类分析[J];电网技术;2006年02期

7 卢志刚;王浩锐;孙继凯;;基于灵敏度分析的数据最优筛选与不良数据辨识[J];电网技术;2011年02期

8 李建敦;彭俊杰;张武;;云存储中一种基于布局的虚拟磁盘节能调度方法[J];电子学报;2012年11期

9 龙丹丽;黎静华;韦化;;粗糙集法解多环境因素影响的母线负荷预测问题[J];电网技术;2013年05期

10 吴建军;;网络舆情的云计算监测模式分析与实现[J];电讯技术;2013年04期

中国博士学位论文全文数据库 前10条

1 郑晓雨;大电网实测负荷模型的实用化研究[D];华北电力大学（北京）;2011年

2 张亚刚;基于广域信息的电力系统故障元件定位方法研究[D];华北电力大学（北京）;2011年

3 李智勇;电力系统运行信息的数据挖掘研究[D];浙江大学;2009年

4 刘继东;电力需求侧响应的效益评估与特性分析[D];山东大学;2013年

5 殷巧玉;量子智能优化算法及其在电机优化应用中的研究[D];哈尔滨理工大学;2011年

6 张谦;新能源风电运营不确定性收益管理方法及信息系统研究[D];华北电力大学;2014年

7 顾涛;集群MapReduce环境中任务和作业调度若干关键问题的研究[D];南开大学;2014年

8 王宁;云计算环境下数据管理与任务调度优化策略研究[D];北京科技大学;2015年

9 徐飞;面向IaaS云计算的虚拟机负载性能优化与保证机制研究[D];华中科技大学;2014年

10 王士贤;系统集成的虚拟企业知识共享研究[D];华中科技大学;2014年

【二级参考文献】

中国期刊全文数据库 前10条

1 刘耀年,伏祥运,张文生,曾令全;基于模糊识别与模糊聚类理论的短期负荷预测[J];电工技术学报;2002年05期

2 郭俊,吴广宁,张血琴,舒雯;局部放电检测技术的现状和发展[J];电工技术学报;2005年02期

3 夏冬;吴俊勇;贺电;宋洪磊;冀鲁豫;;一种新型的风电功率预测综合模型[J];电工技术学报;2011年S1期

4 江天炎;李剑;杜林;王有元;杨丽君;;粒子群优化小波自适应阈值法用于局部放电去噪[J];电工技术学报;2012年05期

5 李化;杨新春;李剑;陈娇;程昌奎;;基于小波分解尺度系数能量最大原则的GIS局部放电超高频信号自适应小波去噪[J];电工技术学报;2012年05期

6 武艳强,黄立人;时间序列处理的新插值方法[J];大地测量与地球动力学;2004年04期

7 康重庆,夏清,胡左浩,张伯明;电力市场中预测问题的新内涵[J];电力系统自动化;2004年18期

8 钱勇,黄成军,陈陈,江秀臣;基于经验模态分解的局部放电去噪方法[J];电力系统自动化;2005年12期

9 陈柔伊,张尧,武志刚,陈泽淮;改进的模糊聚类算法在负荷预测中的应用[J];电力系统及其自动化学报;2005年03期

10 郝晋,石立宝,周家启,徐国禹;基于蚁群优化算法的机组最优投入[J];电网技术;2002年11期

【相似文献】

中国期刊全文数据库 前10条

1 甸宗;美国评出20项本世纪最伟大工程技术成就——电力系统工程位居第一[J];山东电力高等专科学校学报;2000年02期

2 秦文萍;谈电力系统及其自动化专业的毕业实习与设计[J];太原理工大学学报(社会科学版);2001年04期

3 ;中国高校电力系统及其自动化专业第17届学术年会在福州召开[J];中国电力;2002年01期

4 赵丽平;2003中国高等学校电力系统及其自动化专业第19届学术年会在成都召开[J];电力系统及其自动化学报;2003年06期

5 杨宇;赵玉霞;;电力系统中的混沌及其应用方向探讨[J];太原科技;2007年10期

6 侯建勋;;对数字电力系统的初步探讨[J];科技资讯;2008年33期

7 ;“嵌入式技术在电力系统中的应用”征文[J];水电自动化与大坝监测;2009年02期

8 ;“嵌入式技术在电力系统中的应用”征文[J];电力系统自动化;2009年07期

9 ;“嵌入式技术在电力系统中的应用”征文[J];电力系统自动化;2009年10期

10 ;“嵌入式技术在电力系统中的应用”征文[J];电力系统自动化;2009年12期

中国重要会议论文全文数据库 前10条

1 李继红;;电力系统基础课程实践教学改革初探[A];第6届全国高等学校电气工程及其自动化专业教学改革研讨会论文集（下册）[C];2009年

2 周孝信;;面向21世纪的电力系统技术[A];面向21世纪的科技进步与社会经济发展（下册）[C];1999年

3 王大光;;“大机组小电网”电力系统与大容量电力系统互联初步研究[A];新世纪 新机遇 新挑战——知识创新和高新技术产业发展（下册）[C];2001年

4 张步涵;孙海顺;熊信银;尹项根;吴耀武;;《电力系统》课程建设的研究与实践[A];第二届全国高校电气工程及其自动化专业教学改革研讨会论文集（上册）[C];2004年

5 刘刚;张尧;;提高电气工程及其自动化本科专业课教学实践性的探索——以《电力系统多媒体展示》软件辅助教学[A];第四届全国高等学校电气工程及其自动化专业教学改革研讨会论文集（下册）[C];2007年

6 王德林;王晓茹;;基于连续体模型的电力系统机电扰动传播研究[A];中国高等学校电力系统及其自动化专业第二十四届学术年会论文集（下册）[C];2008年

7 ;中国农业大学《中国高等学校电力系统及其自动化专业第二十四届学术年会论文集》编辑委员会[A];中国高等学校电力系统及其自动化专业第二十四届学术年会论文集（下册）[C];2008年

8 周孝信;;面向21世纪的电力系统技术[A];科技进步与学科发展——“科学技术面向新世纪”学术年会论文集[C];1998年

9 戴玉松;;关于在电力系统及其自动化培养方向,学生实习中的一些问题[A];第二届全国高校电气工程及其自动化专业教学改革研讨会论文集（下册）[C];2004年

10 吴静;;浅谈“电力系统概论”课程教学改革的体会[A];第五届全国高校电气工程及其自动化专业教学改革研讨会论文集(1)[C];2008年

中国重要报纸全文数据库 前10条

1 ;参与者的改变：力争成为有竞争力的国际型电力企业[N];国际商报;2007年

2 文锦;国产飞机航空电力系统将由陕出品[N];陕西科技报;2009年

3 鸿宾;IBM与电力系统“亲密接触”[N];中国机电日报;2001年

4 国家电力公司副总经理 陆延昌;依靠科技进步 建设国际一流的电力系统[N];中国电力报;2001年

5 实习记者 秦韵;丹东自主研发电力系产品[N];中国知识产权报;2008年

6 ;IBM与电力系统“亲密接触”[N];网络世界;2001年

7 本报记者 谢仁贵 金富怀;电力系统选手几乎囊括所在奖项的前三名[N];中国电力报;2000年

8 黄梅;推动全球电力系统技术创新[N];国家电网报;2014年

9 介曼莹 孟祥武;电力系统职务犯罪的原因及预防对策[N];中国电力报;2006年

10 记者 王海蕴;我国电力系统恢复研究全球领先[N];中国高新技术产业导报;2009年

中国博士学位论文全文数据库 前10条

1 李远征;电力系统优化调度及其决策方法的研究[D];华南理工大学;2015年

2 魏强;发电机转子角控制及其在电力系统中的作用研究[D];山东大学;2015年

3 王晓东;电力系统中同步发电机摇摆振荡的非线性动力学特性研究[D];哈尔滨工业大学;2015年

4 刘美菊;电力系统混沌动力学行为分析与控制研究[D];沈阳农业大学;2009年

5 王德林;电力系统连续体机电波模型与机电扰动传播研究[D];西南交通大学;2007年

6 赵洪山;电力系统混杂建模与分析[D];华北电力大学（河北）;2004年

7 王宝华;电力系统非线性动力学行为分析与控制[D];南京理工大学;2005年

8 王劲松;复杂系统脆性理论及其在电力系统风险分析中的应用[D];哈尔滨工程大学;2010年

9 徐东杰;互联电力系统低频振荡分析方法与控制策略研究[D];华北电力大学（北京）;2004年

10 陈波;电力系统不良数据辨识的研究[D];华南理工大学;2010年

中国硕士学位论文全文数据库 前10条

1 周晶晶;关于“电力系统与连接过程简介”的翻译实践报告[D];内蒙古大学;2015年

2 吴佳妮;电力系统混沌振荡的模糊滑模控制研究[D];河北联合大学;2014年

3 马美玲;电力系统的混沌特性分析与控制[D];南京师范大学;2015年

4 许纹碧;随机复杂电力系统稳定性分析与应用研究[D];上海交通大学;2015年

5 彭紫楠;参数化法在电力系统鲁棒控制器设计中的应用[D];哈尔滨工业大学;2015年

6 朱祥胜;复杂运行工况下时滞电力系统随机稳定性分析[D];华北电力大学;2015年

7 康昊天;切换控制理论在电力系统暂态稳定控制中的应用[D];华南理工大学;2015年

8 颉迪;考虑参数不确定性的电力系统小干扰稳定分析[D];华北电力大学;2015年

9 江劲舟;考虑大规模风电并网的电力系统小干扰概率稳定性研究[D];华北电力大学;2015年

10 金挺超;含风电场的电力系统随机生产模拟方法研究[D];华北电力大学;2015年

，

本文编号：1159841