小样本学习研究综述

被引：707

作者：

赵凯琳 ^{[1
,2
]}

靳小龙 ^{[1
,2
]}

王元卓 ^{[1
,2
]}

机构：

[1] 中国科学院计算技术研究所网络数据科学与技术重点实验室

[2] 中国科学院大学计算机与控制学院

来源：

软件学报 | 2021年 / 32卷 / 02期

基金：

国家重点研发计划;

关键词：

小样本学习; 微调; 数据增强; 迁移学习; 度量学习; 元学习;

D O I：

暂无

中图分类号：

TP181 [自动推理、机器学习];

学科分类号：

140502 [人工智能];

摘要：

小样本学习旨在通过少量样本学习到解决问题的模型.近年来,在大数据训练模型的趋势下,机器学习和深度学习在许多领域中取得了成功.但是在现实世界中的很多应用场景中,样本量很少或者标注样本很少,而对大量无标签样本进行标注工作将会耗费很大的人力.所以,如何用少量样本进行学习就成为目前人们需要关注的问题.系统地梳理了当前小样本学习的相关工作,具体来说介绍了基于模型微调、基于数据增强和基于迁移学习这3大类小样本学习模型与算法的研究进展;将基于数据增强的方法细分为基于无标签数据、基于数据合成和基于特征增强这3类,将基于迁移学习的方法细分为基于度量学习、基于元学习和基于图神经网络这3类;总结了目前常用的小样本数据集和代表性的小样本学习模型在这些数据集上的实验结果;随后对小样本学习的现状和挑战进行了概述;最后展望了小样本学习的未来发展方向.

引用

页码：349 / 369

页数：21

共 37 条

[1]

Analysis of multinomial models with unknown index using data augmentation [J].