-
题名中文分词算法研究与分析
被引量:9
- 1
-
-
作者
江华丽
-
机构
福建师范大学闽南科技学院
-
出处
《物联网技术》
2016年第1期87-89,共3页
-
文摘
中文分词作为搜索引擎以及自然语言处理的重要组成部分,是当前这一领域的研究热点和难点之一。文中首先分析了中文分词的特点,包含基于字符串匹配分词算法、基于统计分词算法、基于理解分词算法这三大类的各种中文分词算法。并通过分析和对比,对各种中文分词算法进行了总结与展望。
-
关键词
中文分词
字符串匹配分词
统计分词
理解分词
-
分类号
TP393
[自动化与计算机技术—计算机应用技术]
-
-
题名基于自动标引的自然语言检索方法研究
被引量:1
- 2
-
-
作者
王丹
杨晓蓉
马健
-
机构
中国农业科学院农业信息研究所
农业部农业信息服务技术重点实验室
-
出处
《图书馆杂志》
CSSCI
北大核心
2016年第6期66-72,共7页
-
文摘
自从自然语言进入计算机检索系统以来,就因其不受不同职业、不同知识背景、不同检索经验的影响等特点受到终端用户的青睐。由于中文文献的标题是中文文献内容的集中体现,它反映了文献的中心思想。本文介绍的自然语言检索方法,限定在文献标题层面进行主题标引。该方法的基本思想是用自动标引方法分别对检索系统中数据库的文献标题和用于检索的自然语言进行自动赋词标引,对给定的关键词进行概念控制,即词义转换,形成最终标引词;然后,用向量空间模型对数据库的索引数据进行"或"运算检索,形成命中文献集合B,对B集合中的每篇文献标题再进行自动标引,形成的标引词与用于检索的自然语言标引词进行相似度计算,根据B集合中的每篇文献的相似度进行排序,把最符合检索要求的文献最先呈现给用户。此方法是一种简便、实用的自然语言检索方法。
-
关键词
转换、自动赋予标引词的主题词、同义词、近义词、相关词和网罗词
有基于字符串匹配的分词方法
基于理解的分词方法和基于统计的分词方法.基于字符串匹配的分词方法是按照一定的策略将待分析的汉字串与词典中的词条进行匹配
匹配成功则给出一个标引词.按照扫描方向的不同
可分为正向匹配和逆向匹配
按照不同长度优先匹配的不
自动标引
自然语言检索
方法
-
Keywords
Automatic indexing
Natural language retrieval
Methods
-
分类号
G354
[文化科学—情报学]
-