基于RNN神经网络的短期电力负荷预测模型研究
发布时间:2020-04-07 01:53
【摘要】:循环神经网络(Recurrent Neural Network,RNN)是目前最有前景的深度学习网络之一,由RNN引申出的很多改进结构已经被广泛运用在语音识别、机器翻译和DNA序列分析等方向中。在智能电网领域中,收集用户的行为数据并通过RNN或者基于RNN的改进网络进行预测分析已成负荷预测的主流。在竞争激烈的电力市场中,短期电力负荷的预测对于消费者和生产者都至关重要,高准确性的预测能帮助电力公司合理的规划资源并及时采取适当的措施来平衡电力的供需关系,同时也可以为消费者提供高性价比的电力服务。本文主要以电力负荷预测的基本理论为基础,提出一种与注意力机制相结合的RNN改进网络(即长短期记忆网络Long Short-Term Memory,LSTM)作为新的电力负荷预测模型,并将传统LSTM网络在准确性和速度方面与本文提出的新模型进行对比。利用实际的负荷数据在两种模型中进行仿真后,验证得到新型网络结构与传统LSTM网络相比在准确性方面有了提升,训练时长也有缩短。本文主要做了如下工作:(1)根据历史负荷数据的特性以及输入向量之间的相关性,搭建以RNN网络为基础的两种不同的LSTM电力负荷预测模型。针对迭代后因激活函数求导后收敛而导致梯度消失的问题,提出将传统LSTM网络与注意力机制相结合的解决方案,弥补了传统LSTM网络在梯度下降甚至消失的情况下引起的长时记忆失效的缺陷。与传统LSTM网络采用遗忘门的结构缓解梯度消失的方法不同,本文提出的模型主要依靠输入向量动态的分配权重完成对信号的实时控制来削弱梯度消失的影响。(2)针对所有输入向量进行数据预处理和归一化的工作,并根据样本数据的特性对神经网络结构进行设计。因为获取到的历史数据有空缺和噪声的现象,所以对输入向量进行添补和去噪的工作,减少了样本数据因不符合模型而产生预测偏差的可能性。将输入向量均衡化到一定范围内,降低了由非常规样本数据导致的不良影响,并通过控制变量法确定神经网络的超参数。(3)将处理过的样本数据输入传统LSTM网络和结合注意力机制的LSTM网络两种模型进行仿真,选取相对误差(Relative Error,RE)与绝对误差(Absolute Error,AE)作为评判指标。通过对比两种模型的预测结果得到结合注意力机制的LSTM误差相对更小的结论,从而证明了结合注意力机制的LSTM在电力负荷预测中可以提高预测的准确率以及缩短训练时间。
【图文】:
成都理工大学专业硕士学位论文输入层隐含层输出层图 3-2 简易 RNN 的结构-2 在时间维度上展开后得到图 3-3 所示的结构,,从图 3-3 中维度始终是一个不断往后递归的过程,之前时刻的结果对着直接的影响,但因为在每个时间步上的权值一样,所以在共享同一组权值。
图 3-4 隐含层接收到的全部输入刻 RNN 输出层的残差项同普通神经网络 MPL 一样为t k 要接受上一个时刻来自隐含层的信号,而且在反向传导时隐含层的反馈:( )t t t t1h h k hk h hhk h f a w w+ + 长度为T ,则残差T1 +均为 0,并且整个网络只有一套参时刻 t 其倒数分别为::tht th itih h ihO OaU xw a w :tkt tk hthk k hkO OaV bw a w :tht tk htO OaW b
【学位授予单位】:成都理工大学
【学位级别】:硕士
【学位授予年份】:2019
【分类号】:TM715;TP183
【图文】:
成都理工大学专业硕士学位论文输入层隐含层输出层图 3-2 简易 RNN 的结构-2 在时间维度上展开后得到图 3-3 所示的结构,,从图 3-3 中维度始终是一个不断往后递归的过程,之前时刻的结果对着直接的影响,但因为在每个时间步上的权值一样,所以在共享同一组权值。
图 3-4 隐含层接收到的全部输入刻 RNN 输出层的残差项同普通神经网络 MPL 一样为t k 要接受上一个时刻来自隐含层的信号,而且在反向传导时隐含层的反馈:( )t t t t1h h k hk h hhk h f a w w+ + 长度为T ,则残差T1 +均为 0,并且整个网络只有一套参时刻 t 其倒数分别为::tht th itih h ihO OaU xw a w :tkt tk hthk k hkO OaV bw a w :tht tk htO OaW b
【学位授予单位】:成都理工大学
【学位级别】:硕士
【学位授予年份】:2019
【分类号】:TM715;TP183
【相似文献】
相关期刊论文 前10条
1 胡悦;;金融市场中的神经网络拐点预测法[J];金融经济;2017年18期
2 迟惠生;陈珂;;1995年世界神经网络大会述评[J];国际学术动态;1996年01期
3 王方;苗放;陈垦;;基于优化神经网络的地质灾害监测预警仿真[J];计算机仿真;2019年11期
4 马猛;王明红;;基于进化神经网络的304不锈钢车削加工表面粗糙度预测[J];轻工机械;2019年06期
5 庄连生;吕扬;杨健;李厚强;;时频联合长时循环神经网络[J];计算机研究与发展;2019年12期
6 吴立可;;脉冲神经网络和行为识别[J];通讯世界;2018年12期
7 林嘉应;郑柏伦;刘捷;;基于卷积神经网络的船舶分类模型[J];信息技术与信息化;2019年02期
8 俞颂华;;卷积神经网络的发展与应用综述[J];信息通信;2019年02期
9 韩真;凯文·哈特尼特;;为神经网络的通用理论建造基石[J];世界科学;2019年04期
10 鲍伟强;陈娟;熊涛;;基于进化神经网络的短期电力负荷预测研究[J];电工技术;2019年11期
相关会议论文 前10条
1 孙军田;张U
本文编号:2617292
本文链接:https://www.wllwen.com/kejilunwen/dianlilw/2617292.html
教材专著