汉语自然语言检索中的词法分析处理

Morphological Analysis in Chinese Natural Language Retrieval

本文对自然语言检索中的词法分析处理进行了探讨。首先讨论了基于词法分析的自然语言检索处理的类型 ,如加权统计法、N元法、统计学习方法 ,然后讨论了词法分析的方法和过程 ,重点对语词切分、词性标注的方法 ,并分析了相关的过程 ,特别是对基于概率统计的方法进行了介绍。最后对词法分析中存在的问题进行了探讨。

This paper discusses the lexical analysis and morphological analysis in Chinese natural language retrieval.First the paper presents the ways of the natual language retrieval based on the Lexical analysis and morphological analysis,including weighted statistic method,N-gram method and statistic learning method,then focuses on the procedure of Lexical analysis,emphasizes on the ways of words segmentation,part label of the lexical analysis and morphological analysis are discussed.