基于生成对抗网络的图文检索算法

随着互联网上的图片和文本信息呈爆炸式增长,最小化图像和文本两种模态之间的语义鸿沟成为检索系统设计的关键问题。针对图文检索系统的关联性建模需求,研究基于生成对抗网络的图文交叉检索算法,通过博弈对抗方法训练网络模型,对图像和文本两种模态间的语义特征进行关联,将样本特征表示到公共子空间实现了图像和文本的对抗性交叉检索。在INRIA-Websearch、Nuswide-10k和Wiki数据集上实现了图文交叉检索算法,取得了较高的检索效率和准确度。