基于面部表情的学习者情绪自动识别研究——适切性、现状、现存问题和提升路径

被引:38
作者
陈子健 [1 ,2 ]
朱晓亮 [1 ]
机构
[1] 华中师范大学国家数字化学习工程技术研究中心
[2] 贵州财经大学信息学院
基金
国家重点研发计划;
关键词
面部表情识别; 情绪识别; 学习者情绪; 计算机视觉; 深度学习; 情感计算; 多模态;
D O I
10.15881/j.cnki.cn33-1304/g4.2019.04.008
中图分类号
TP391.41 []; TP18 [人工智能理论]; G434 [计算机化教学];
学科分类号
080203 ; 081104 ; 0812 ; 0835 ; 1405 ; 040110 ;
摘要
面部表情是表达情绪的主要通道,也是用于情绪识别的一种重要信号。以计算机视觉、人工智能、情感计算等新兴技术为支撑,计算机可以通过识别学习者外显的面部表情,来判断学习者内隐的情绪状态,从而获取识别、理解学习者情绪的能力。实现基于面部表情的学习者情绪识别,首先需要在对不同情绪表征方法进行对比分析的基础上,确定适用的情绪表征方法,再对基于面部表情的学习者情绪识别的适切性进行论证。作为面部表情识别流程中的核心环节,面部表情特征提取方法分为传统的计算机视觉方法和深度学习方法两大类。梳理不同特征提取算法的特点及局限性,可以为探索适合学习者面部表情识别的特征提取算法提供借鉴,并推动学习者面部表情识别研究的发展和有效应用。当前,学习者情绪面部表情识别相关研究仍存有局限性,需要从大规模的自然的学习者情绪面部表情数据库的共建共享,并融合多种特征识别学习者情绪面部表情;从结合人工设计和自动学习两种方法,提取面部表情特征等多种路径,来提升研究深度。
引用
收藏
页码:64 / 72
页数:9
相关论文
共 16 条
[1]   物理学习空间中学习者情绪感知研究综述 [J].
刘智 ;
方常丽 ;
刘三(女牙) ;
孙建文 .
远程教育杂志, 2019, 37 (02) :33-44
[2]   基于面部表情的学习困惑自动识别法 [J].
江波 ;
李万健 ;
李芷璇 ;
叶韵 .
开放教育研究, 2018, 24 (04) :101-108
[3]   基于多流CNN-LSTM网络的群体情绪识别 [J].
卿粼波 ;
熊文诗 ;
周文俊 ;
熊珊珊 ;
吴晓红 .
计算机应用研究, 2018, 35 (12) :3828-3831
[4]   课堂环境中基于面部表情的教学效果分析 [J].
韩丽 ;
李洋 ;
周子佳 ;
宋沛轩 .
现代远程教育研究, 2017, (04) :97-103+112
[5]   基于空间多尺度HOG特征的人脸表情识别方法 [J].
童莹 .
计算机工程与设计, 2014, 35 (11) :3918-3922+3979
[6]   在线学习系统中情感识别模块的设计与实现 [J].
魏刃佳 ;
丁亦喆 ;
张莉 ;
吴振强 .
现代教育技术, 2014, 24 (03) :115-122
[7]  
情绪心理学[M]. 华东师范大学出版社 , 傅小兰, 2015
[8]  
情绪心理学[M]. 北京大学出版社 , 孟昭兰主编, 2005
[9]   Design and Implementation of Technology Enabled Affective Learning Using Fusion of Bio-physical and Facial Expression [J].
Ray, Arindam ;
Chakrabarti, Amlan .
EDUCATIONAL TECHNOLOGY & SOCIETY, 2016, 19 (04) :112-125
[10]   Facial emotion recognition towards affective computing-based learning [J].
Lin, Kuan Cheng ;
Huang, Tien-Chi ;
Hung, Jason C. ;
Yen, Neil Y. ;
Chen, Szu Ju .
LIBRARY HI TECH, 2013, 31 (02) :294-307