Human Friendly Interface Design for Virtual Fitting Room Applications on Android Based Mobile Devices

This paper presents an image processing design flow for virtual fitting room (VFR) applications, targeting both personal computers and mobile devices. The proposed human friendly interface is implemented by a three-stage algorithm: Detection and sizing of the user's body, detection of reference points based on face detection and augmented reality markers, and superimposition of the clothing over the user's image. Compared to other existing VFR systems, key difference is the lack of any proprietary hardware components or peripherals. Proposed VFR is software based and designed to be universally compatible as long as the device has a camera. Furthermore, JAVA implementation on Android based mobile systems is computationally efficient and it can run in real-time on existing mobile devices.

数字说话人脸生成技术综述

在现代计算机视觉和自然语言处理的交叉领域,数字说话人脸生成技术已经成为一个越来越重要的研究主题。数字说话人脸生成技术专注于依据预定的文本或音频序列生成逼真的人脸图像。近年来,深度学习方法,如卷积神经网络、生成对抗性网络以及神经渲染场在此领域已经表现出了显著的应用价值。这些方法不仅引起了学术界的广泛关注,而且在工业界得以实际应用,用于解决图像处理和计算机视觉方面的具体问题。尽管已经取得了一定的进展,实际应用这些方法仍然面临诸多挑战。综合分析和评估深度学习方法在数字说话人脸生成方面的具体实现,以识别现存方法的优缺点,探讨尚待解决的普遍问题,并突出仍需进一步研究的开放性问题。此外,从统计学角度列出了目前可用的数据集,并对其进行评估和比较,以便研究人员能更容易地选择满足他们需求的数据集。

基于ProE软件的虚拟人面部建模及渲染研究

针对虚拟人面部的结构尺寸,在Pro E软件中建立面部三维实体模型,并对虚拟人面部进行场景式渲染、环境光照影响的模拟,构建虚拟现实的结构环境,直观形象的体现面部三维实体效果,降低企业设计成本和生产成本,高效、直观、无差的模拟现场,增强软件应用的实用性,此举具有十分重要的现实意义和应用价值。

基于运动分解的嘴部肌肉建模仿真

现有虚拟嘴部肌肉建模多采用传统的Water肌肉分类方法,运动控制较为独立,缺乏对运动间相关性的研究。提出了一种基于运动分解的嘴部肌肉建模及控制方法。首先根据解剖结构及肌肉运动特征,将嘴部自身运动分解为凸唇、翘唇和开合三个基本运动单元;其次现有模型中括约肌运动方式是向中心收缩或扩散,难以表现凸翘等嘴部运动,为此提出了弧状肌模型,并通过控制三个运动参数,结合其它嘴周围肌组合出不同的嘴部运动。实验表明,新方法能够较真实地仿真出嘴部的多种自然运动,控制较为便捷。

虚拟装配中面贴合感知构造研究

人机交互是虚拟装配的一个重要特性和瓶颈技术 ,基于碰撞检测的交互无法满足桌面虚拟装配的实时需要 .让虚拟环境感知复杂对象关系是解决人机交互问题的一条重要途径 ,提出了面贴合感知的实现机制、面贴合的感知模式和相应的感知算法 .基于面贴合感知的人机交互摆脱了虚拟装配基于碰撞检测的交互模式 ,从而避免了碰撞检测算法的复杂度 .实验证明面贴合感知增强了虚拟环境对装配过程中人的交互意图的理解 ,同时有效地保证了交互的实时性 。

虚拟情感人建模与实现技术研究

提出虚拟人的人工情感模型,并以模型输出的情绪向量对应人脸表情变化特征点,再由3DSMAX工具生成人脸模型,定义其各个与表情相关的特征点,并将其读入OpenGL中,再通过VisualC++进行控制。通过实验仿真实现人工情感模型对人脸表情的实时驱动。结论表明,情感模型的建立,实现计算机更加智能﹑友好和更有能力,与表情表达相结合,实现人类与计算机能更好的交互。

将高解析度动作撷取资料校正应用在脸部动画系统(英文)

提出一个新的方法来产生脸部动画 ,即利用动作撷取系统捕捉真人脸上的细微动作 ,再将动态资料用来驱动脸部模型产生动画 .首先 ,利用 Oxford Metrics'VICON8系统 ,在真人的脸上贴了 2 3个反光标记物 ,用以进行动作撷取 .得到三维动态资料后 ,必须经过后继处理才能使用 ,因此 ,提出了消除头部运动的方法 ,并估计人头的旋转支点 ,经过处理后 ,剩余的动态资料代表脸部表情的变化 ,因此 ,可以直接运用到脸部模型 .用 2 .5D的脸部模型来实作系统 ,这样可兼得二维模型与三维模型的优点 :简单、在小角度旋转时显得生动、自然 .在脸部动画的制作中 ,利用一个特殊的内差公式来计算非特征点的位移 ,并将脸部分成数个区域 ,用以限制模型上三维点的移动 ,使动画更加自然 .此动画系统在 Pentium III50 0 MHz的机器上 ,并配有 Open GL的加速卡 ,更新率可以超过每秒 30张 .

人脸跨域合成技术研究进展

总结了人脸跨域合成技术的起源、任务类型与难点、技术发展与挑战、潜在应用与问题等,从自监督与弱监督跨域合成、基于预训练大模型跨域合成、基于跨域合成隐私保护3个方面探讨了人脸跨域合成技术未来发展趋势与挑战。

基于视频序列的虚拟人渲染方法

针对肢体动作有限的虚拟人仿真系统,提出了一种基于视频序列的虚拟人渲染方法。首先利用建模工具获取关键表情和口型的脸部模型,并对脸部模型进行预处理,在选取脸部模型后,采用基于模型的脸部姿态估计算法,将其叠加到包含肢体动作的图片上以生成具有新表情的图片;然后利用图像变形技术逐次生成含有虚拟表情的图像序列,并将图像序列转换为视频,通过播放视频渲染出逼真的虚拟人。实验结果表明,渲染得到的虚拟人的真实度有了明显的提高。