一种深度图失真引入的虚拟视失真估计方法

提出了一种深度图失真引入的虚拟视失真估计方法.该方法依据能量一致性假设要求,将深度图宏块划分为平坦宏块和非平坦宏块.平坦宏块使用频域块级方法,非平坦宏块使用时域像素级方法估计由深度图失真造成的绘制视失真.虚拟视失真采用左右绘制视融合计算,并计入虚拟视中空洞修复引入的失真.该方法在宏块分类判据中综合了相机参数,对于不同拍摄条件下的视频序列可以使用相同的判别阈值获得最佳区域划分,通用性较强.实验结果证明,该方法兼顾了估计准确性和复杂度,对于在有限码率预算条件下提高深度视频编码效率、优化三维视频码率分配具有重要的指导意义.

基于深度的虚拟视失真估计方法

提出一种基于深度的虚拟视失真估计方法,将深度图宏块划分为平坦宏块和非平坦宏块,结合各自特点分别用频域块级方法和时域像素级方法估计由深度失真引起的虚拟视失真。实验证明,该方法估计准确度较高,且复杂度比像素级模型有所降低。它对于提高深度视频编码效率和优化多视+深度(MVD)码率分配具有重要指导意义。

主观听音中的失真辨别能力训练

在扬声器的主观听音训练中,需要听音员对扬声器的非线性失真有较强的分辨能力;同时,也需要知道扬声器的何种失真更容易被人耳所察觉,针对容易被察觉的失真,对扬声器相应的结构、材料进行改善。因此,需要虚拟出各种特定的失真来进行主观听音。介绍了虚拟失真技术以及失真分辨训练的方法。

一种用于深度图编码的虚拟视失真估计模型

多视视频加深度(MVD,multi-view video plus depth)的3D视频格式中,深度图提供视频的场景几何信息,其不在终端成像显示而是通过基于深度图像的绘制(DIBR)技术用于绘制虚拟视图像。在深度图的压缩编码过程中,深度图的失真会引起绘制的虚拟视图像的失真。深度图用于绘制而不用于显示的特性使得准确估计深度图绘制的虚拟视失真可以提高深度图编码的率失真性能。本文分析了不同的深度图失真引起的不同的虚拟视失真,进而提出一种估计深度图失真引起虚拟视失真的指数模型,并将模型用于深度图编码的率失真优化(RDO)中。实验结果表明,本文提出的模型可以准确估计深度图失真引起的虚拟视失真,提高深度图编码性能,相比于HTM的VSO可以降低约10%的编码时间,并且虚拟视质量略优于HTM。

Robust Watermarking of Mobile Video Resistant against Barrel Distortion

In head mounted display(HMD),in order to cancel pincushion distortion,the images displayed on the mobile should be prewarped with barrel distortion.The copyright of the mobile video should be verified on both the original view and the pre-warped virtual view.A robust watermarking resistant against barrel distortion for HMDs is proposed in this paper.Watermark mask is embedded into image in consideration of imperceptibility and robustness of watermarking.In order to detect watermark from the pre-warped image with barrel distortion,an estimation method of the barrel distortion is proposed for HMDs.Then,the same warp is enforced on the embedded watermark mask with the estimated parameters of barrel distortion.The correlation between the warped watermark and the pre-warped image is computed to predicate the existence of watermark.As shown in experimental results,watermark of mobile video can be detected not only from the original views,but also from the pre-warped virtual view.It also shows that the proposed scheme is resistant against combined barrel distortion and common post-processing,such as JPEG compression.

易错网络中面向虚拟视点绘制的宏块模型

为了降低传输失真对自由视点视频虚拟视点质量的影响,提出了一种同时适用于彩色图及深度图的宏块区分模型。模型主要包括两部分:首先结合立体视频时空域的相关性,在考虑错误扩散的基础上,提出一个递归形式的宏块级传输失真模型;之后分别讨论彩色图失真和深度图失真对虚拟视点质量的影响,进而提出了一个低复杂度的基于绘制失真分析的重要性模型。实验结果表明,与随机丢包相比,本文算法能在不改变丢包率(PLR)的情况下大幅提高虚拟视点的客观质量,在PLR为20%时,平均峰值信噪比(PSNR)最大能提高15.65dB,且主观质量接近零传输失真情况。

基于3D-HEVC的多视点纹理加深度的联合比特分配算法

首先依据视频序列的统计特性,建立纹理比特率和深度图比特率与虚拟视点失真之间模型;然后分别建立拉格朗日算子与纹理、深度图比特率的对应关系,在前两步的基础上构建由虚拟视点失真模型和拉格朗日算子的代价方程,为了保证目标码率与输出码率在一定的误差范围内,建立纹理比特率和深度比特率的受限约束方程;最后利用目标码率的约束方程,求解出最优的纹理比特率和深度图比特率。实验结果表明,提出的算法与目前流行的多视点纹理加深度的算法相比,在相同的编码比特率情况下,虚拟视点和基本视点客观质量平均提高0.15dB,因此具有更高的编码效率。