-
题名一种基于融合递归机制的长文本机器阅读理解算法
被引量:1
- 1
-
-
作者
武钰智
向伟
史娜维
-
机构
西南民族大学电子信息工程国家民委重点实验室
西南民族大学电气工程学院
-
出处
《西南民族大学学报(自然科学版)》
CAS
2022年第2期190-196,共7页
-
基金
西南民族大学研究生创新型科研项目(CX2021SZ48)。
-
文摘
目前对于机器阅读理解的研究大多都使用预先训练的语言模型如BERT来编码文档和问题的联合上下文信息,相较于传统的RNN结构,BERT模型在机器阅读理解领域取得了显著的性能改进.但是当前基于BERT的机器阅读理解模型由于输入长度有限(最大长度为512),在进行特征提取时,存在一定程度的语义丢失,且不具备建立长距离依赖能力.为了解决这个问题,提出了一种基于BERT-Base的长本文机器阅读理解模型BERT-FRM.通过添加重叠窗口层以更灵活的方式切割输入文本,使用两个BERT模型独立编码问题和文档,并且在模型中添加递归层来传递不同片段之间的信息,赋予模型建立更长期依赖的能力.实验结果表明,BERT-FRM模型与BERT-Base基线模型相比,在TriviaQA和CoQA两个机器阅读理解数据集上的F1值分别提升了3.1%和0.8%.
-
关键词
机器阅读理解
BERT
递归机制
长文本算法
-
Keywords
machine reading comprehension
BERT
recurrent mechanism
long text algorithm
-
分类号
TP391.1
[自动化与计算机技术—计算机应用技术]
-
-
题名VB实现长文本打印算法的研究
被引量:1
- 2
-
-
作者
王立明
-
机构
大连民族学院计算机系
-
出处
《大连民族学院学报》
CAS
2000年第3期13-16,共4页
-
文摘
对VB中打印的实现方法进行了分析,并提出了利用VB的Printer对象实现适合于事务处理的长文本打印算法和文本段落分解算法.最后给出实现例程.
-
关键词
VB
长文本打印算法
PRINTER对象
文字数据
文本段落分解算法
VISUAL
Basic
程序设计
-
Keywords
printer object
text data
super-long text
separating text
-
分类号
TP312
[自动化与计算机技术—计算机软件与理论]
-