一种结合增强对齐与多注意力融合的偏振视频超分辨方法

在偏振成像探测中,偏振多通道视频序列给数据传输和处理带来挑战,同时探测精度又依赖高分辨率图像,为此超分辨率计算成像就成为偏振成像探测系统的关键技术。从视频运动特征入手,提出一种结合增强对齐与多注意力融合的偏振视频超分辨率重建方法。采用三级级联结构实现特征对齐,每一级特征由上一级特征下采样两倍得到,并采用光流引导的可变形卷积进行特征对齐;在融合阶段结合包括时间注意力、空间注意力、通道注意力在内的多种注意力机制,以充分利用通道间依赖性和时空相关性来提升超分辨率重建效果。所提方法与VSR-DUF、RBPN、EDVR、RLSP、RSDN、RRN、DARN、MSAWN等视频超分辨率方法在0°、45°、90°、135°偏振角视频上进行定性和定量对比实验,该实验表明该算法峰值信噪比和结构相似度指标高于其他算法,并且视频帧的高频纹理细节的修复更加丰富,接近偏振成像系统的原始高清图像帧。