1、人工神经网络评价方法,主要内容,1.人工神经网络基础知识 2.BP网络及BP算法 3.实例演示,2,一、人工神经网络的概念,人工神经网络是一个并行、分布处理结构,它由处理单元及连接的无向信号通道互联而成。这些处理单元具有局部内存,并可以完成局部操作。每一个处理单元有一个单一的输出联接,这个输出可以根据需要被分成希望个数的许多并行联接,且这些并行联接的输出相同的信号及相应的处理单元的信号,信号的大小不因分支的多少而变化。处理单元的输出信号可以是任何需要的数学模型,每个处理单元中进行的操作必须是完全局部的。也就是说,它必须仅仅依赖于经过输入连接到达处理单元的所有输入信号的当前值和存储在处理单元局部
2、内存中的值。,3,人工神经网络的八个要素,一组处理单元处理单元的激活状态 输出函数 联接模式传递规则激活规则学习规则样本集合,4,模型图,5,w1i,w2i,wni,Neti=xjwji,ai=Fi(ai,neti),oi=f(ai),人工神经元,基本构成 对每一个神经元来说都会接受一组输入信号,每个输入信号都对应一个权,所有输入的加权和决定该神经元的激活状态。设:(1,x2,xn)输入向量W=(w1,)联接权向量 neti=xiwi网络输入net=XW,6,激活函数希望人工神经元有一个更一般的变换函数,用来执行该神经元所获得的网络输入的变换,这就是激活函数。o=f(net)几种典型的激活函数
3、:,7,几种典型的激活函数,1.线性函数:2.非线性斜面函数: net - net,8,几种典型的激活函数,4.S型函数 其中,当a=0,b=1时为函数最简单形式,饱和值为:0,1,9,联接模式,层内联接: 本层内的神经元到本层内的神经元的联接,用来加强和完成层内神经元的竞争。循环联接: 神经元到自身的联接层间联接: 不同层间中的神经元的联接,实现信号的传递,10,分层结构,单级网简单单级网: 下面以简单单级网为例,说明神经网络的分层结构,其余形式据此可理解。网络输入向量:(1,x2,xn)网络输出向量:O(o1,o2,on) 输入层的神经元不对信号做任何处理,只起到扇出作用,11,简单单级网
4、的网络图,12,x1,x2,xn,.,输入层,输出层,o1,o2,on,简单单级网,权矩阵:W=(wij)输出层第j个元素的网络输入为netjnetj=x1w1j+x2w2j+.+xnwnjNET=(net1, net2,., netm)NET=XWO=F(NET),13,分层结构,单级横向反馈网多极网层次划分非线性激活函数循环网,14,人工神经网络的训练,训练:将由样本向量构成的样本集合输入到人工神经网络的过程中,按照一定方式调整神经元之间的联接权,使得网络在接受输入时可以给出适当的输出。,15,无导师学习,不需要目标,训练集中只含有输入向量,训练算法致力于修改权矩阵,使网络对相似输入可以给
5、出相似的输出。,16,有导师学习,在训练中,要求用户在给出输入向量的同时,给出对应的输出向量,二者构成一个训练对。主要步骤:从样本集合中取一个样本(Ai,Bi)计算出实际输出O求D=Bi-O根据D调整权矩阵W每个样本重复这个过程,直到误差不超过规定范围,17,Delta规则,18,异或问题,异或运算 x=y 其他,19,BP算法基本概念,BP算法: 在于利用输出层的误差来估计输出层的直接前导层的误差,再用这一误差估计更前一层的误差,这就形成了将输出端表现出的误差沿着与输入信号传送的方向逐级向网络的输入端传递的过程。 BP网络: 使用BP算法进行学习的多级非循环网络。,20,利用BP网络进行评价
6、的优点,21,它主要根据所提供的数据,通过学习和训练,找出输入与输出之间的内在联系,从而求取问题的解。而不是依据对问题的经验知识和规则,因而具有自适应功能,这对于弱化权重确定中人为的因素是十分有益的。能够处理那些有噪声或不完全的数据,具有泛化功能和很强的容错能力。由于实际综合评估往往是非常复杂的,各个因素之间互相影响,呈现出复杂的非线性关系,人工神经网络为处理这类非线性问题提供了强有力的工具,基本BP算法,神经元激活函数网络输入:netj=x1w1+x2w2+.+xnwn 输出net=0时,o取值0.5,net落在(-0.6,0.6)之间,o的变化率较大,收敛比较快,应把net控制在这个范围内
7、。,22,网络的拓扑结构输入向量、输出向量的维数及隐藏层层数,隐藏层神经元数由问题决定。多数情况下,BP网络选用二级网络训练过程向前传播阶段:从样本集中取一个样本(Xp,Yp),将Xp输入网络;计算相应的实际输出Op向后传播阶段:计算实际输出与相应的理想输出的差;按最小化误差的方式调整权矩阵,23,误差传播分析,输出层权的调整,24,隐藏层权的调整,25,wp1,1k,wp2,2k,wpm,mk,ANq,第k层,第k-1层,第k-2层,ANh,ANp,vhp, pk-1,隐藏层权的调整,26,基本BP算法,for h=1 to M do 初始化W(h);初始化精度控制参数E= +1While
8、E doE=0;对S中的每一个样本(Xp, Yp):计算出Xp对应得的实际输出Op;计算出Ep;E=E+Ep;调整W(M);,h=M-1;while h0 do调整W(h);h=h-1E=E/2.0,27,BP学习算法,基本思路:按照Delta规则,对各层权进行调整,从而使精度要求满足Ep 其中,Ep满足公式:,28,几个问题的讨论,收敛速度问题局部极小点问题网络瘫痪问题稳定性问题步长问题,29,基于神经网络的企业效绩综合评价,30,建立系统的评价指标体系:然后才能采用适当的方法进行评价。根据评价的全面性和可比性原则,企业效绩主要从财务效益状况、资产营运状况、偿债能力状况以及发展能力状况4个方
9、面来全面综合考核企业绩效评价值和综合评价得分的获得方法:参照财政部颁布的大型普通机械制造业各指标的最优和较差标准值。各评价指标的标准值的计算:,指标体系的构成,财务效益状况净资产收益率总资产收益率资本保值增值率成本费用利润率,资产运营状况总资产周转率流动资产周转率存货周转率应收账款周转率,偿债能力状况资产负债率产权比率速动比率现金流动负债比率,发展能力状况销售增长率资本积累率总资产增长率固定资产成新率,31,32,评价结果分析,33,应用网络通过对本企业历史数据的训练,利用训练好的网络可以简便有效地评价企业当期各个方面的评价值,进而得出企业整体效绩大小。在实际操作中,通过评价标准大小的选取,比如选择行业优秀值,可以进行同类企业的横向比较,看出在市场竞争中企业的整体优劣状况和效绩排名。,