LSSVM过程建模中超参数选取的梯度优化算法

被引:13
作者
陶少辉
陈德钊
胡望明
机构
[1] 浙江大学化学工程与生物工程学系
关键词
最小二乘支持向量机; 建模; 优选超参数; 最速下降法; 快速留一法; 柠檬酸发酵;
D O I
暂无
中图分类号
TP183 [人工神经网络与计算];
学科分类号
摘要
基于结构风险最小的最小二乘支持向量机(least squares support vector machine,LSSVM)为标准支持向量机(SVM)的约简,训练简易,性能良好。其模型精度受超参数影响,常规的网络搜索法很难搜得最佳超参数。在快速留一法的基础上,以全样本留一预测误差平方和最小化为目标,导出基于梯度的最优化算法,用以优选为LSSVM超参数,进而构建G-LSSVM模型。以柠檬酸发酵过程为算例对G-LSSVM进行检验,结果表明G-LSSVM的超参数选取耗时少,模型稳定性良好,且拟合和预报性能都优于标准SVM和神经网络。有望适用于机理不明、高度非线性、小样本的化工过程建模。
引用
收藏
页码:1514 / 1517
页数:4
相关论文
共 9 条
  • [1] 基于证据框架的最小二乘支持向量机在精对苯二甲酸生产中的应用
    郑小霞
    钱锋
    [J]. 化工学报, 2006, (07) : 1612 - 1616
  • [2] 与机理杂交的支持向量机为发酵过程建模
    许光
    俞欢军
    陶少辉
    陈德钊
    [J]. 化工学报, 2005, (04) : 659 - 664
  • [3] 基于优化最小二乘支持向量机的小样本预测研究
    朱家元
    杨云
    张恒喜
    王卓健
    [J]. 航空学报, 2004, (06) : 565 - 568
  • [4] 基于最小二乘支持向量机的天然气负荷预测
    刘涵
    刘丁
    郑岗
    梁炎明
    宋念龙
    [J]. 化工学报, 2004, (05) : 828 - 832
  • [5] 基于支持向量机的柠檬酸发酵过程统计建模
    许光
    俞欢军
    陈德钊
    [J]. 化学反应工程与工艺, 2004, (01) : 59 - 63
  • [6] 基于最小二乘支持向量机的软测量建模
    阎威武
    朱宏栋
    邵惠鹤
    [J]. 系统仿真学报, 2003, (10) : 1494 - 1496
  • [7] 热偶精馏过程模拟优化方法的改进——人工神经网络-遗传算法
    王延敏
    姚平经
    [J]. 化工学报, 2003, (09) : 1246 - 1250
  • [8] 神经网络建模方法在维生素C发酵过程中的应用
    花强
    王树青
    [J]. 化工学报, 1996, (04) : 433 - 438
  • [9] Benchmarking least squares support vector machine classifiers
    van Gestel, T
    Suykens, JAK
    Baesens, B
    Viaene, S
    Vanthienen, J
    Dedene, G
    de Moor, B
    Vandewalle, J
    [J]. MACHINE LEARNING, 2004, 54 (01) : 5 - 32