基于注意力机制的手语语序转换方法

文章考虑听障人士与健全人士在语法和语言结构上的差异,设计一种基于注意力机制的手语语序转换器,实现手语语序到书面表达的转换。语序转换器在编码阶段使用双向长短期记忆网络(long short-term memory,LSTM)提取手语语序特征,解码阶段使用一维卷积提取编码器隐藏状态的特征,并利用注意力机制避免了长距离的依赖问题,从而得到书面表达。实验结果表明,语序转换器准确率最高为92.64%。