-
题名基于感知推理和外部空间先验特征的图像修复
- 1
-
-
作者
吴鹏
张孙杰
王永雄
陈远峰
覃海旺
-
机构
上海理工大学光电信息与计算机工程学院
-
出处
《数据采集与处理》
CSCD
北大核心
2024年第4期933-943,共11页
-
基金
上海市晨光学者基金(18CG52)
上海市自然科学基金(22ZR1443700)。
-
文摘
在基于深度学习的图像修复算法中,当存在大面积掩码时,由于缺乏合理的先验信息指导,修复结果往往会出现伪影和模糊纹理等现象。针对此问题,提出将先验特征与图像预测滤波相结合的图像修复算法。该算法包含两个分支:图像滤波核预测分支和特征推理与图像滤波分支。从图像滤波核预测分支的解码器部分提取特征,利用多尺度外部空间特征融合对掩码区域特征进行重建,并传递给另一分支的解码阶段作为先验特征,为图像修复提供更为丰富的语义信息。然后,在特征推理和图像滤波分支部分引入空间特征感知推理块,它能够过滤掉分散注意力的特征,同时捕捉信息丰富的远距离图像上下文进行推理。最后,使用图像预测滤波核进行过滤消除伪影。在CelebA和Places2数据集上与其他修复网络进行对比实验,证明了该方法在修复质量上的优越性。
-
关键词
图像修复
先验特征
图像预测滤波
特征感知推理
外部空间特征融合
-
Keywords
image inpainting
prior features
image predictive filtering
feature perception reasoning
external spatial feature fusion
-
分类号
TP391.41
[自动化与计算机技术—计算机应用技术]
-