基于多注意力卷积神经网络的特定目标情感分析

被引:135
作者
梁斌 [1 ]
刘全 [1 ,2 ,3 ]
徐进 [1 ]
周倩 [1 ]
章鹏 [1 ]
机构
[1] 苏州大学计算机科学与技术学院
[2] 软件新技术与产业化协同创新中心
[3] 符号计算与知识工程教育部重点实验室(吉林大学)
关键词
注意力机制; 卷积神经网络; 特定目标情感分析; 深度学习; 自然语言处理;
D O I
暂无
中图分类号
TP183 [人工神经网络与计算]; TP391.1 [文字信息处理];
学科分类号
摘要
特定目标情感分析作为情感分析一个重要的子任务,近年来得到越来越多研究人员的关注.针对在特定目标情感分析中,将注意力机制和LSTM等序列性输入网络相结合的网络模型训练时间长、且无法对文本进行平行化输入等问题,提出一种基于多注意力卷积神经网络(multi-attention convolution neural networks,MATT-CNN)的特定目标情感分析方法.相比基于注意力机制的LSTM网络,该方法可以接收平行化输入的文本信息,大大降低了网络模型的训练时间.同时,该方法通过结合多种注意力机制有效弥补了仅仅依赖内容层面注意力机制的不足,使模型在不需要例如依存句法分析等外部知识的情况下,获取更深层次的情感特征信息,有效识别不同目标的情感极性.最后在SemEval2014数据集和汽车领域数据集(automotive-domain data,ADD)进行实验,取得了比普通卷积神经网络、基于单注意力机制的卷积神经网络和基于注意力机制的LSTM网络更好的效果.
引用
收藏
页码:1724 / 1735
页数:12
相关论文
共 3 条
[1]   短文本理解研究 [J].
王仲远 ;
程健鹏 ;
王海勋 ;
文继荣 .
计算机研究与发展, 2016, (02) :262-269
[2]  
Mining opinion features in customer review .2 Hu M,Liu B. AAAI2004 . 2004
[3]  
http://nlp.stanford.edu/projects/glove .