-
题名带有先验的语音驱动三维人脸动画生成方法
- 1
-
-
作者
吕镇宇
夏方方
刘芳丽
郭润甲
郭子俊
-
机构
北京信息科技大学计算机学院
-
出处
《计算机科学与应用》
2023年第11期2072-2079,共8页
-
文摘
语音驱动的三维人脸生成是计算机视觉和图形学中一个非常有吸引力的研究课题。除了有趣之外,它还有广泛的应用,例如游戏动画、3D视频通话和AR/MR的3D化身。由于人脸运动的复杂性和不确定性,以往方法生成的结果有唇形不准确、面部动态性不佳的缺点。不同于以往一阶段的方法,我们使用一种新的两阶段的方法,在模型训练的第一阶段我们使用变分自动编码器将高维的复杂的面部映射进低维的空间,充分学习人脸运动先验。在第二阶段,Transformer根据输入的语音信号在学习到的人脸先验的基础上进行潜在代码查询,以回归的方式生成面部运动序列。这样可以降低生成面部动画的难度,减少了映射的模糊,可以在任意指定音频上得到生动的人脸说话动画,经验证我们的方法与先进的方法相比在唇形和脸部动态性上取得优势。
-
关键词
语音驱动3D面部动画
3D说话人脸生成
3D动画人
-
分类号
TP3
[自动化与计算机技术—计算机科学与技术]
-
-
题名基于Unity的智能交互虚拟文物展览馆
- 2
-
-
作者
夏方方
郭润甲
吕镇宇
刘芳丽
郭子俊
-
机构
北京信息科技大学计算机学院
-
出处
《计算机科学与应用》
2023年第11期2080-2088,共9页
-
文摘
近年来,基于虚拟现实技术建设的博物馆建设逐渐成为了全球各大博物馆发展、政府投资、科研开发领域的热点。在数字时代,将VR技术应用于现代博物馆的建设之中具有重要的现实意义。虚拟文物展览馆作为传统博物馆的延伸改变了传统历史文物的陈列理念,虚拟博物馆不仅为用户提供了一种访问数字资源的方式,同时也提供了一种全新的展示和体验文化遗产的形式,还为文物保护提供了新的思路。本文区别于传统虚拟博物馆的构建方法提出了一种构建可智能交互的虚拟文物展览馆综合系统的方法,以可智能交互的虚拟文物展览馆作为研究背景,融入基于AI-driven的虚拟导游、显著性检测、眼动追踪等技术增强与用户的交互性,为用户带来更丰富的游览体验。同时为国家文化遗产和数字文化发展提供了一种全新的展示和保护手段,积极的推动文化资源的数字化发展。
-
关键词
Unity
3D
虚拟文物展览馆
显著性检测
AI-Driven虚拟导游
眼动追踪
-
分类号
G26
[历史地理—考古学及博物馆学]
-
-
题名交错并联PFC变换器的预测控制研究
被引量:1
- 3
-
-
作者
吕镇宇
于新红
吴蒙
陈军希
-
机构
电机驱动与功率电子国家地方联合工程研究中心(中国科学院海西研究院泉州装备制造研究所)
-
出处
《信息技术》
2022年第2期76-82,共7页
-
基金
泉州市科技计划对外合作项目(2020C073)。
-
文摘
针对交错并联图腾柱PFC拓扑在电感电流连续导电模式CCM(Continue Conduction Mode)下,占空比预测控制中系统存在二次谐波以及特定次谐波的问题,设计对特定频率谐波有良好跟踪特性的PR控制器,补偿占空比预测控制的谐波分量。同时,在电压外环中设计陷波器,对特定次谐波进行滤波和反馈补偿。仿真实验结果证明,基于PR控制器与陷波器的占空比预测控制系统,在保留了系统快速动态性的基础上,输入电流很好的得到滤波,电流的THD(Total Harmonic Distortion)值明显减小,谐波含量降低,提高了输入电能的质量,实现PFC功能。
-
关键词
交错并联PFC
PR
占空比预测控制
THD
陷波器
-
Keywords
interleaved totem pole PFC
PR
duty cycle predictive control
THD
Notch filter
-
分类号
TM461
[电气工程—电器]
-