基于短语结构文法的分词研究

本文在分析现有各种分词算法的基础上,遵循自然语言理解的层次模型,着重对短语结构文法及其形式化描述进行了探讨。提出了汉语自动分词在短语层的理解模型及短语层分词语义相关原则,最后给出了短语结构分词法(PsG法)的机器实现。实验结果表明,PSG法在提高分词精度上具有相当好的效果。