基于层级注意力的故事性图像描述生成的研究

本文提出了基于层级关注的故事性图像描述模型。该模型采用两层关注机制,其中句级关注对图像全局特征和句子语义做映射,词级关注对图像局部特征与单词语义做映射,模型最终通过LSTM模型生成多张图片的描述。实验结果表明,我们的模型能够对序列图像进行有效的故事性描述,生成的描述关联性更强,连贯性好。