藏文树型分词法的研究及实现

在藏文信息处理中,凡是涉及句法、语义的都需要以词为基本单位;句法分析和机器翻译都是先要分词,然后是在词的基础上展开处理的。在藏文分词的研究过程中藏文分词的准确性直接制约着藏文输入法研究和搜索引擎的设计和实现、藏文语料库建设以及藏语语义分析研究等高层藏文信息处理技术的进一步发展。因此藏文分词是藏文信息处理领域中一项不可缺少的基础性工作,也是智能化藏文信息处理的关键所在。本文借鉴汉语的分词理论中的最大匹配法,提出一种基于藏文特性且能快速准确的分词方法——藏文树型分词法。