-
题名双分支时空关键点特征增强人体姿态迁移网络
被引量:1
- 1
-
-
作者
冉启材
王亮军
方昱春
倪兰
-
机构
上海大学计算机工程与科学学院
上海大学文学院
-
出处
《中国科技论文》
CAS
北大核心
2023年第3期252-258,共7页
-
基金
国家自然科学基金资助项目(61976132)
上海市自然科学基金资助项目(19ZR1419200)。
-
文摘
为了充分利用动作序列之间的先验信息以提升姿态迁移模型的性能,提出了一个基于时空图卷积的双流关键点特征增强模块,即双分支时空图姿态迁移模块(dual-branch spatial temporal graph pose transfer block,DSTG-PTB)。DSTG-PTB从高帧率和低帧率2个不同的分支进行特征提取。输入的关键点数据首先经过位置嵌入和速度嵌入,然后构建人体骨骼关键点的时空图,并利用时空图卷积网络挖掘动作关键点之间的关联特征,最后将2个分支的特征进行融合并嵌入现有的姿态迁移模型中。对4个序列动作数据集进行了全面的定性和定量实验分析,结果表明,所提DSTG-PTB可以有效提升姿态迁移网络的性能,生成更符合用户审美的序列图像。
-
关键词
时空图卷积
姿态迁移
特征增强
图像生成
-
Keywords
spatial-temporal graph convolution
pose transfer
feature enhancement
image generation
-
分类号
TP391.41
[自动化与计算机技术—计算机应用技术]
-