基于宽度学习方法的多模态信息融合

被引：40

作者：

贾晨 ^{[1
]}

刘华平 ^{[2
,3
]}

续欣莹 ^{[1
]}

孙富春 ^{[2
,3
]}

机构：

[1] 太原理工大学电气与动力工程学院

[2] 清华大学计算机科学与技术系

[3] 清华大学智能技术与系统国家重点实验室

来源：

智能系统学报 | 2019年 / 14卷 / 01期

关键词：

宽度学习方法; 多模态融合; 相关性分析; 特征提取; 非线性变换; 目标识别; 神经网络; RGB-D图像分类;

D O I：

暂无

中图分类号：

TP181 [自动推理、机器学习];

学科分类号：

140502 [人工智能];

摘要：

多模态机器学习通过有效学习各个模态的丰富特征来解决不同模态数据的融合问题。考虑到模态间的差异性,基于宽度学习方法提出了一个能够学习和融合两种模态特征的框架,首先利用宽度学习方法分别提取不同模态的抽象特征,然后将高维特征表示在同一个特征空间进行相关性学习,并通过非线性融合得到最后的特征表达,输入分类器进行目标识别。相关实验建立在康奈尔大学抓取数据集和华盛顿大学RGB-D数据集上,实验结果验证了相比于传统的融合方法,所提出的方法具有更好的稳定性和快速性。

引用

页码：150 / 157

页数：8

共 12 条

[1]

一种多层特征融合的人脸检测方法 [J].