基于语义信息的中文分词研究

中文分词在自然语言处理中是一个关键基础性研究。针对中文分词歧义问题,该文建立在词法和句法基础上,提出了一种基于语义信息的二元汉语分词器,是通过语境的切分理论和二元切词的相结合进行歧义消解。然后,用分词校正器从整个句子的语法角度上检测中文分词结果的正确性。最后,从语境角度分析歧义字段,以此提高分词的准确率。