-
题名基于锚点的快速三维手部关键点检测算法
- 1
-
-
作者
秦晓飞
何文
班东贤
郭宏宇
于景
-
机构
上海理工大学光电信息与计算机工程学院
-
出处
《电子科技》
2024年第4期77-86,共10页
-
基金
国家自然科学基金(92048205)
国家留学基金(202008310014)。
-
文摘
在人机协作任务中,手部关键点检测为机械臂提供目标点坐标,A2J(Anchor-to-Joint)是具有代表性的一种利用锚点进行关键点检测的方法。A2J以深度图为输入,可实现较好的检测效果,但对全局特征获取能力不足。文中设计了全局-局部特征融合模块(Global-Local Feature Fusion,GLFF)对骨干网络浅层和深层的特征进行融合。为了提升检测速度,文中将A2J的骨干网络替换为ShuffleNetv2并对其进行改造,用5×5深度可分离卷积替换3×3深度可分离卷积,增大感受野,有效提升了骨干网络对全局特征的提取能力。文中在锚点权重估计分支引入高效通道注意力模块(Efficient Channel Attention,ECA),提升了网络对重要锚点的关注度。在主流数据集ICVL和NYU上进行的训练和测试结果表明,相比于A2J,文中所提方法的平均误差分别降低了0.09 mm和0.15 mm。在GTX1080Ti显卡上实现了151 frame·s^(-1)的检测速率,满足人机协作任务对于实时性的要求。
-
关键词
人机协作
三维手部关键点检测
锚点
深度图
全局-局部特征融合
ShuffleNetv2
深度可分离卷积
高效通道注意力
-
Keywords
human-robot collaboration
3D hand keypoint detection
anchor point
depth map
global-local feature fusion
ShuffleNetv2
depthwise separable convolution
efficient channel attention
-
分类号
TP391.41
[自动化与计算机技术—计算机应用技术]
-
-
题名融合局部语义与全局信息的人脸表情识别
- 2
-
-
作者
潘海鹏
郝慧
苏雯
-
机构
浙江理工大学机械与自动控制学院
-
出处
《光电子.激光》
CAS
CSCD
北大核心
2022年第6期652-659,共8页
-
基金
国家自然科学基金(62006209)
浙江省自然科学基金(LQ20F020001)
+1 种基金
浙江理工大学科研启动基金(1802225-Y)
浙江理工大学基本科研业务费专项资金(2020Q014)资助项目。
-
文摘
人脸表情识别在人机交互等人工智能领域发挥着重要作用,当前研究忽略了人脸的语义信息。本文提出了一种融合局部语义与全局信息的人脸表情识别网络,由两个分支组成:局部语义区域提取分支和局部-全局特征融合分支。首先利用人脸解析数据集训练语义分割网络得到人脸语义解析,通过迁移训练的方法得到人脸表情数据集的语义解析。在语义解析中获取对表情识别有意义的区域及其语义特征,并将局部语义特征与全局特征融合,构造语义局部特征。最后,融合语义局部特征与全局特征构成人脸表情的全局语义复合特征,并通过分类器分为7种基础表情之一。本文同时提出了解冻部分层训练策略,该训练策略使语义特征更适用于表情识别,减少语义信息冗余性。在两个公开数据集JAFFE和KDEF上的平均识别准确率分别达到了93.81%和88.78%,表现优于目前的深度学习方法和传统方法。实验结果证明了本文提出的融合局部语义和全局信息的网络能够很好地描述表情信息。
-
关键词
人脸表情识别
人脸解析
迁移学习
局部-全局特征融合
解冻部分层训练策略
-
Keywords
facial expression recognition
face parsing
transfer learning
local-global feature fusion
training strategy of unfreeze partial layers
-
分类号
TP183
[自动化与计算机技术—控制理论与控制工程]
-