近几年,基于Transformer的预训练模型展现了强大的模态表征能力,促使了多模态的下游任务(如图像描述生成任务)正朝着完全端到端范式的趋势所转变,并且能够使得模型获得更好的性能以及更快的推理速度.然而,该技术所提取的网格型视觉特征...近几年,基于Transformer的预训练模型展现了强大的模态表征能力,促使了多模态的下游任务(如图像描述生成任务)正朝着完全端到端范式的趋势所转变,并且能够使得模型获得更好的性能以及更快的推理速度.然而,该技术所提取的网格型视觉特征中缺乏区域型的视觉信息,从而导致模型对对象内容的描述不精确.因此,预训练模型在图像描述生成任务上的适用性在很大程度上仍有待探索.针对这一问题,提出一种基于视觉区域聚合与双向协作学习的端到端图像描述生成方法(visual region aggregation and dual-level collaboration,VRADC).为了学习到区域型的视觉信息,设计了一种视觉区域聚合模块,将有相似语义的网格特征聚合在一起形成紧凑的视觉区域表征.接着,双向协作模块利用交叉注意力机制从两种视觉特征中学习到更加有代表性的语义信息,进而指导模型生成更加细粒度的图像描述文本.基于MSCOCO和Flickr30k两个数据集的实验结果表明,所提的VRADC方法能够大幅度地提升图像描述生成的质量,实现了最先进的性能.展开更多
在双向中继协作系统中,随着用户数和中继数量增加,节点间的传输干扰成为影响系统性能的不可忽略因素,如何考虑节点间传输干扰并设计合理的资源分配算法是提升性能的关键。对此设计一种实现简单、复杂度相对较低、可扩展性好的避免干扰...在双向中继协作系统中,随着用户数和中继数量增加,节点间的传输干扰成为影响系统性能的不可忽略因素,如何考虑节点间传输干扰并设计合理的资源分配算法是提升性能的关键。对此设计一种实现简单、复杂度相对较低、可扩展性好的避免干扰资源分配算法RABST(Resource Allocation based on SWIPT and TDMA)。考虑了中继节点能量和信息的分配比例、传输功率等资源的分配,以及多用户的链路资源来提高链路的总传输速率和利用率。将RABST建模成优化问题并求解,优化了系统的资源分配并最大化了系统吞吐量。仿真实验证明了RABST可以有效地增大系统吞吐量。展开更多
在车载通信系统中采用双向中继协作通信可以提升系统性能。然而,车辆移动造成的链路相关性会增大车载双向中继协作通信系统的中断概率。针对这个问题,建立了车载双向链路相关性系统模型,用相关系数描述车辆移动造成的双向链路特性,简化...在车载通信系统中采用双向中继协作通信可以提升系统性能。然而,车辆移动造成的链路相关性会增大车载双向中继协作通信系统的中断概率。针对这个问题,建立了车载双向链路相关性系统模型,用相关系数描述车辆移动造成的双向链路特性,简化了系统中断性能分析。同时,在中继采用AF方式下得到系统中断性能的闭式解,且中断概率一定时,求得最优功率分配方案。数值分析表明,相关系数比功率分配系数对中断性能影响的幅度更大,相比传统单向AF中继协作通信系统的最优功率分配方案,最多可以节省4 d B的总功率。展开更多
文摘近几年,基于Transformer的预训练模型展现了强大的模态表征能力,促使了多模态的下游任务(如图像描述生成任务)正朝着完全端到端范式的趋势所转变,并且能够使得模型获得更好的性能以及更快的推理速度.然而,该技术所提取的网格型视觉特征中缺乏区域型的视觉信息,从而导致模型对对象内容的描述不精确.因此,预训练模型在图像描述生成任务上的适用性在很大程度上仍有待探索.针对这一问题,提出一种基于视觉区域聚合与双向协作学习的端到端图像描述生成方法(visual region aggregation and dual-level collaboration,VRADC).为了学习到区域型的视觉信息,设计了一种视觉区域聚合模块,将有相似语义的网格特征聚合在一起形成紧凑的视觉区域表征.接着,双向协作模块利用交叉注意力机制从两种视觉特征中学习到更加有代表性的语义信息,进而指导模型生成更加细粒度的图像描述文本.基于MSCOCO和Flickr30k两个数据集的实验结果表明,所提的VRADC方法能够大幅度地提升图像描述生成的质量,实现了最先进的性能.
文摘在双向中继协作系统中,随着用户数和中继数量增加,节点间的传输干扰成为影响系统性能的不可忽略因素,如何考虑节点间传输干扰并设计合理的资源分配算法是提升性能的关键。对此设计一种实现简单、复杂度相对较低、可扩展性好的避免干扰资源分配算法RABST(Resource Allocation based on SWIPT and TDMA)。考虑了中继节点能量和信息的分配比例、传输功率等资源的分配,以及多用户的链路资源来提高链路的总传输速率和利用率。将RABST建模成优化问题并求解,优化了系统的资源分配并最大化了系统吞吐量。仿真实验证明了RABST可以有效地增大系统吞吐量。
文摘在车载通信系统中采用双向中继协作通信可以提升系统性能。然而,车辆移动造成的链路相关性会增大车载双向中继协作通信系统的中断概率。针对这个问题,建立了车载双向链路相关性系统模型,用相关系数描述车辆移动造成的双向链路特性,简化了系统中断性能分析。同时,在中继采用AF方式下得到系统中断性能的闭式解,且中断概率一定时,求得最优功率分配方案。数值分析表明,相关系数比功率分配系数对中断性能影响的幅度更大,相比传统单向AF中继协作通信系统的最优功率分配方案,最多可以节省4 d B的总功率。