视频相似性检测方法综述

针对大数据时代服务器端存在众多冗余数据,降低文件检索效率的问题,对代表性的视频相似性检测方法和研究进展进行了总结。首先,介绍了相似性视频的定义及检测流程,分析完整检测系统应具备的视频预处理、特征提取、特征匹配3大模块,并详述了具体实施方法;然后,针对视频相似性检测方法展开阐述,从基于视频时空信息分类、视频特征分类和视频多模态检测方法3个层面深入分析了各方案的实现原理及优缺点;最后,对相似性检测领域常用的数据集进行归纳,对经典算法的检测性能进行了对比,并探讨了视频相似性检测领域存在的问题,对未来发展趋势进行了展望。

基于内容的检索中视频相似性度量方法研究

视频检索中,最普遍的检索方式是提交例子视频,查询出类似的视频。所以要设计一个准确可靠的视频检索系统,就必须定义好怎样的视频才是相似的。论文对基于内容的视频检索的基本原理进行了阐述,介绍了基于帧和镜头的相似性度量方法的基本思想和主要公式,然后对视频相似性度量方法进行了分析研究,最后对新的视频相似性度量研究向提出了展望。

基于ViT的视频相似度评估及同源片段定位模型

视频版权问题面临巨大挑战。基于视频检索数据集CC_WEB_VIDEO与视频部分拷贝检测数据集VCDB,结合Vision Transformer、注意力机制等技术,对复杂时间、空间视频的相似性进行研究,提出基于ViT的视频细粒度相似性评估模型,使用基于图的视频重复片段定位算法定位同源片段,并在实验数据集上验证了该模型的有效性。

基于行列块编码的视频查询方法

基于内容的视频分析方法是多媒体检索领域内最近兴起的研究课题 ,多数研究集中在视频序列结构化、索引、识别和浏览等技术上 ,而对用户常用的视频查询却研究较少 .为此讨论了基于“窗口对”查询方法存在的不足 ,并根据视频编码制式的特点、视频本身特性和常用的视频分析方法 ,提出了一种可处理多种视频格式的方法 .该法基于视频帧行列块编码 ,采用了一种逐帧匹配的流式查询方法 .该方法可用少量的字节来表征视频帧的颜色和位置信息 ,其占用内存少 ,简单易得 ,计算量小 ,而且对于移位和亮度的变化均不敏感 ,使得查全率和准确率大为提高 。

A video structural similarity quality metric based on a joint spatial-temporal visual attention model

Objective video quality assessment plays a very important role in multimedia signal processing. Several extensions of the structural similarity （SSIM） index could not predict the quality of the video sequence effectively. In this paper we propose a structural similarity quality metric for videos based on a spatial-temporal visual attention model. This model acquires the motion attended region and the distortion attended region by computing the motion features and the distortion contrast. It mimics the visual attention shifting between the two attended regions and takes the burst of error into account by introducing the non-linear weighting fimctions to give a much higher weighting factor to the extremely damaged frames. The proposed metric based on the model renders the final object quality rating of the whole video sequence and is validated using the 50 Hz video sequences of Video Quality Experts Group Phase I test database.