专业搜索引擎的实现与研究——中文分词算法

为实现专业信息查询的中文搜索引擎,首要的问题就是中文分词。本文首先介绍了分词用词典数据结构的组织以及使用二分查找的查询算法,然后提出了一种基于最短路径的改进分词算法。实验证明,利用该算法,可以消除大量歧义,取得较好的分词效果。