日语自动分词的一种实现算法

本文给出了一个实现日语自动分词的算法，该算法充分考虑日语的构调及构句特点，利用精心设计的分词词典和邻接规则库，对日语句子进行分词，该算法不同于“最长一致”和“最少句节数”方法，而是几种方法的混合体，另外，本分词算法还对未登录词的处理进行了考虑。