-
题名基于残差时移模块和双流网络的手语识别方法
- 1
-
-
作者
蔡畅
林靖宇
-
机构
广西大学电气工程学院
-
出处
《计算机与数字工程》
2023年第12期2841-2845,2851,共6页
-
基金
国家自然科学基金项目(编号:61561005)
广西研究生教育创新计划(编号:YCSW2019026)资助。
-
文摘
目前存在的手语识别方法中,多模态图像被广泛使用,但多模态数据形式复杂,不易操作。此外,现存的手语识别方法无法有效聚合全局与运动区域局部信息。基于改善手语识别方法的目的,论文提出了一种仅使用RGB图像的基于残差时移模块与双流网络的手语识别方法。双流网络两分支改进为全局图像分支与运动区域局部分支,运动区域局部分支采用语义分割算法进行运动区域分割,解决了以往运动区域难以定位的问题。两分支通过数据融合将全局与局部信息有效聚合。在SLR500开源数据集上进行实验,该方法获得高达94.7%的识别率。
-
关键词
手语识别
双流网络
时域位移
全局特征
运动区域局部分割
数据融合
-
Keywords
sign language recognition
two-stream networks
temporal shift
global feature
local semantic segmentation of moving region
data fusion
-
分类号
TP391
[自动化与计算机技术—计算机应用技术]
-