摘要
设计一种组合型的分词机制:基于字典的双向最大匹配,基于字标注的中文分词方法和隐马尔科夫的分词方式。通过实验的结果比较,表明该种组合型的分词方法能够较好地解决中文歧义并发现新的登录词。
In this paper, we design and implement a combination-type word segmentation mechanism： the dictionary-based largest two-way matching, the word tagging-based Chinese word segmentation method and the hidden Markov segmentation approach. By comparing the experimental results, we find that this combination-type word segmentation means can better solve the Chinese ambiguity and discover the new word.
出处
《计算机应用与软件》
CSCD
北大核心
2012年第7期26-28,39,共4页
Computer Applications and Software
基金
国家自然科学基金项目(60673186
60971088)
江苏省高校"青蓝工程"中青年学术带头人培养对象资助项目
关键词
中文信息处理
中文自动分词
组合型分词
Chinese information processing Chinese word automatic segmentation Combination-type word segmentation
