[目的/意义]为了提升论文文献类型标签的准确性,了解论文文献类型标签准确性对科研评价结果的影响大小,[方法/过程]该文选取9个系列的159本Review期刊在2017-2018年发表的论文作为研究对象,对比分析了这些论文在Web of Science、Scopus...[目的/意义]为了提升论文文献类型标签的准确性,了解论文文献类型标签准确性对科研评价结果的影响大小,[方法/过程]该文选取9个系列的159本Review期刊在2017-2018年发表的论文作为研究对象,对比分析了这些论文在Web of Science、Scopus和期刊官网上文献类型标注的差异,并通过召回率、准确率和F1-score三个指标对差异进行测度,并选取期刊Annual Review of Analytical Chemistry作为典型案例,分析其文献类型标签改变对文献类型归一化指标CNCI的影响程度。[结果/结论]研究发现不同出版商的Review系列期刊和不同类型Review期刊在不同数据库中的文献类型标注准确率存在差异,案例分析发现CNCI对文献类型标签变化极为敏感,基于CNCI的指标,如JCI也较为敏感。因此,为了保证科研评价指标的准确性,文献类型标签的准确性很重要,而为了更好实现文献类型归一化,发展和使用更为鲁棒性的指标是关键。展开更多
文摘[目的/意义]为了提升论文文献类型标签的准确性,了解论文文献类型标签准确性对科研评价结果的影响大小,[方法/过程]该文选取9个系列的159本Review期刊在2017-2018年发表的论文作为研究对象,对比分析了这些论文在Web of Science、Scopus和期刊官网上文献类型标注的差异,并通过召回率、准确率和F1-score三个指标对差异进行测度,并选取期刊Annual Review of Analytical Chemistry作为典型案例,分析其文献类型标签改变对文献类型归一化指标CNCI的影响程度。[结果/结论]研究发现不同出版商的Review系列期刊和不同类型Review期刊在不同数据库中的文献类型标注准确率存在差异,案例分析发现CNCI对文献类型标签变化极为敏感,基于CNCI的指标,如JCI也较为敏感。因此,为了保证科研评价指标的准确性,文献类型标签的准确性很重要,而为了更好实现文献类型归一化,发展和使用更为鲁棒性的指标是关键。