基于上下文的二阶隐马尔可夫模型

被引：17

作者：

刘洁彬 ^{[1
]}

宋茂强 ^{[1
]}

赵方 ^{[1
]}

杨志宇 ^{[2
]}

机构：

[1] 北京邮电大学软件学院

[2] 北京航天航空大学软件学院

来源：

计算机工程 | 2010年 / 36卷 / 10期

关键词：

词性标注; 二阶隐马尔可夫模型; 参数平滑; Viterbi算法;

D O I：

暂无

中图分类号：

TP391.1 [文字信息处理];

学科分类号：

120506 [数字人文];

摘要：

为体现上下文信息对当前词汇词性的影响,在传统隐马尔可夫模型的基础上提出一种基于上下文的二阶隐马尔可夫模型,并应用于中文词性标注中。针对改进后的统计模型中由于训练数据过少而出现的数据稀疏问题,给出基于指数线性插值改进平滑算法,对参数进行有效平滑。实验表明,基于上下文的二阶隐马尔可夫模型比传统的隐马尔可夫模型具有更高的词性标注正确率和消歧率。

引用

页码：231 / 232+235 +235

页数：3