一种基于鲁棒估计的极限学习机方法

被引:19
作者
胡义函 [1 ]
张小刚 [1 ]
陈华 [2 ]
李晶辉 [1 ]
机构
[1] 湖南大学电气与信息工程学院
[2] 湖南大学信息科学与工程学院
关键词
极限学习机; 稳健估计; 鲁棒极限学习机; M估计; 神经网络;
D O I
暂无
中图分类号
TP183 [人工神经网络与计算];
学科分类号
摘要
极限学习机(ELM)是一种单隐层前馈神经网络(single-hidden layer feedforward neural networks,SLFNs),它相较于传统神经网络算法来说结构简单,具有较快的学习速度和良好的泛化性能等优点。ELM的输出权值是由最小二乘法(least square,LE)计算得出,然而经典的LS估计的抗差能力较差,容易夸大离群点和噪声的影响,从而造成训练出的参数模型不准确甚至得到完全错误的结果。为了解决此问题,提出一种基于M估计的采用加权最小二乘方法来取代最小二乘法计算输出权值的鲁棒极限学习机算法(RBELM),通过对多个数据集进行回归和分类分析实验,结果表明,该方法能够有效降低异常值的影响,具有良好的抗差能力。
引用
收藏
页码:2926 / 2930
页数:5
相关论文
共 6 条
[1]   神经网络极速学习方法研究 [J].
邓万宇 ;
郑庆华 ;
陈琳 ;
许学斌 .
计算机学报, 2010, 33 (02) :279-287
[2]   线性模型中M估计的渐近性质 [J].
吴耀华 .
应用数学学报, 1994, (03) :401-410
[3]   ICGA-PSO-ELM Approach for Accurate Multiclass Cancer Classification Resulting in Reduced Gene Sets in Which Genes Encoding Secreted Proteins Are Highly Represented [J].
Saraswathi, Saras ;
Sundaram, Suresh ;
Sundararajan, Narasimhan ;
Zimmermann, Michael ;
Nilsen-Hamilton, Marit .
IEEE-ACM TRANSACTIONS ON COMPUTATIONAL BIOLOGY AND BIOINFORMATICS, 2011, 8 (02) :452-463
[4]   Evolutionary extreme learning machine [J].
Zhu, QY ;
Qin, AK ;
Suganthan, PN ;
Huang, GB .
PATTERN RECOGNITION, 2005, 38 (10) :1759-1763
[5]  
Learning Capability and Storage Capacity of Two-Hidden-Layer Feedforward Networks. Guang-Bin Huang. IEEE Transactions on Neural Networks . 2003
[6]  
Extreme learningmachines:a survey. Huang Guangbin,Wang Dianhui,Lan Yuan. Int J Mach Learn&Cyber . 2011