-
题名基于多尺度自适应注意力机制的视听语音分离
- 1
-
-
作者
吴亮
王甲祥
施汉琴
郑爱华
盛小飞
-
机构
安徽大学计算机科学与技术学院
徐州工程学院信息工程学院
安徽大学人工智能学院
芜湖辛巴网络科技有限公司
-
出处
《人工智能》
2024年第3期1-14,共14页
-
基金
国家自然科学青年科学基金(62102344)
安徽省重点研发项目(202304a05020056)
安徽省高校协同创新项目(GXXT-2022-036)。
-
文摘
在混合音频分离过程中,通常使用与音频信息相关的视觉信息引导混合音频分离,这些视觉信息包含人脸图像、嘴唇运动和面部地标等,目前的方法对这些视觉信息的利用还不充分,并且音频信息和对应的视觉信息之间的关联性较弱。本工作设计了一种基于多尺度自适应注意力机制的视听语音分离网络,该网络联合人脸图像、嘴唇运动和面部地标这些视觉信息引导混合音频进行分离,并设计了一种交叉注意融合模块,该模块可以融合嘴唇运动特征和面部地标特征以得到增强且互补的视觉表示。此外,音频信息和视觉信息之间的相关性较弱,本文还设计了一种多尺度自适应注意力机制,并将其加入语音分离网络解码器中,使音频信息和对应的视觉信息更好地相互关联。实验结果验证了该方法的有效性。
-
关键词
语音分离
多模态
注意力机制
视听相关性
-
分类号
TN912.3
[电子电信—通信与信息系统]
-
-
题名试谈健全高校内部监督机制
- 2
-
-
作者
王甲祥
-
出处
《南都学坛(南阳师专学报)》
1996年第2期80-83,共4页
-
文摘
试谈健全高校内部监督机制王甲祥监督机制,是一种社会制约机制.核心是对权力的制约.党的十四大报告中指出:“要加强各级党组织和纪检机关对党员干部的监督,加强人民群众、各民主党派和无党派人士对我们党的监督,建立和健全党内党外.自上而下和自下而上相结合的监督...
-
关键词
高校
内部监督机制
教育改革
党内监督
行政监督
群众监督
-
分类号
G647
[文化科学—高等教育学]
-
-
题名高校年轻干部提高领导影响力的途径
- 3
-
-
作者
王甲祥
吕亚丁
-
机构
南阳师专音乐系
-
出处
《南都学坛(南阳师专学报)》
1997年第4期90-91,94,共3页
-
-
关键词
高校
年轻干部
领导影响力
权力性影响力
非权力性影响力
自重
-
分类号
G647.1
[文化科学—高等教育学]
-
-
题名1.一例追及问题的数学处理(高一)
- 4
-
-
作者
王甲祥
-
机构
河北省承德县上板城高中
-
出处
《数理天地(高中版)》
2000年第4期40-40,共1页
-
-
分类号
G4
[文化科学—教育技术学]
-