BP神经网络模型与学习算法详解.doc
本文关键词:BP神经网络模型与学习算法,由笔耕文化传播整理发布。
BP神经网络模型与学习算法
BP神经网络模型与学习算法 1
一,,什么是BP 1
二、反向传播BP模型 8
一,什么是BP
"BP(Back Propagation)网络是1986年由Rumelhart和McCelland为首的科学家小组提出,是一种按误差逆传播算法训练的多层前馈网络,是目前应用最广泛的神经网络模型之一。BP网络能学习和存贮大量的输入-输出模式映射关系,而无需事前揭示描述这种映射关系的数学方程。它的学习规则是使用最速下降法,通过反向传播来不断调整网络的权值和阈值,使网络的误差平方和最小。BP神经网络模型拓扑结构包括输入层(input)、隐层 hide layer 和输出层 output layer 。"
我们现在来分析下这些话:
“是一种按误差逆传播算法训练的多层前馈网络”
BP是后向传播的英文缩写,那么传播对象是什么?传播的目的是什么?传播的方式是后向,可这又是什么意思呢。
传播的对象是误差,传播的目的是得到所有层的估计误差,后向是说由后层误差推导前层误差:
即BP的思想可以总结为
利用输出后的误差来估计输出层的直接前导层的误差,再用这个误差估计更前一层的误差,如此一层一层的反传下去,就获得了所有其他各层的误差估计。?
“BP神经网络模型拓扑结构包括输入层(input)、隐层 hide layer 和输出层 output layer ”
最简单的三层BP:
“BP网络能学习和存贮大量的输入-输出模式映射关系,而无需事前揭示描述这种映射关系的数学方程。”
BP利用一种称为激活函数来描述层与层输出之间的关系,从而模拟各层神经元之间的交互反应。
激活函数必须满足处处可导的条件。那么比较常用的是一种称为S型函数的激活函数:
那么上面的函数为什么称为是S型函数呢:
我们来看它的形态和它导数的形态:
p.s. S型
本文关键词:BP神经网络模型与学习算法,由笔耕文化传播整理发布。
本文编号:223309
本文链接:https://www.wllwen.com/kejilunwen/rengongzhinen/223309.html