基于深度信念网络的命名实体识别

被引:14
作者
冯蕴天
张宏军
郝文宁
陈刚
机构
[1] 解放军理工大学指挥信息系统学院
关键词
深度信念网络; 命名实体识别; 神经网络语言模型;
D O I
暂无
中图分类号
TP391.1 [文字信息处理];
学科分类号
摘要
传统的命名实体识别方法是将大量手工制定的特征输入到统计学习模型中以实现对词语的标记,能够取得较好的效果,但其手工特征制定的方式增加了模型建立的难度。为了减轻传统方法中手工特征制定的工作量,首先对神经网络语言模型进行无监督训练以得到词语特征的分布式表示,然后将分布式的特征输入到深度信念网络中以发现词语的深层特征,最后进行命名实体识别。该方法在前人研究的基础上利用深度信念网络对神经网络语言模型进行了扩展,提出了一种可用于命名实体识别的深层架构。实验表明,在仅使用词特征和词性特征的条件下,该方法用于命名实体识别的性能略优于基于条件随机场模型的方法,具有一定的使用价值。
引用
收藏
页码:224 / 230
页数:7
相关论文
共 3 条
  • [1] 基于条件随机域的中文命名实体识别研究[D]. 王志强.南京理工大学. 2006
  • [2] A fast learning algorithm for deep belief nets
    Hinton, Geoffrey E.
    Osindero, Simon
    Teh, Yee-Whye
    [J]. NEURAL COMPUTATION, 2006, 18 (07) : 1527 - 1554
  • [3] Training products of experts by minimizing contrastive divergence
    Hinton, GE
    [J]. NEURAL COMPUTATION, 2002, 14 (08) : 1771 - 1800