期刊文献+
共找到4篇文章
< 1 >
每页显示 20 50 100
联合在线分类的双注意力RGBT孪生网络跟踪 被引量:1
1
作者 张兆宇 田春娜 +1 位作者 周恒 田西兰 《西安电子科技大学学报》 EI CAS CSCD 北大核心 2022年第6期76-85,共10页
可见光和热红外成像机理不同,因此可以捕获的目标信息也不同。基于可见光和热红外的双模视觉跟踪器,可以综合利用两种模态内在的信息关联性和互补性,降低单模态信息的局限性和不确定性,提高视觉系统的鲁棒跟踪能力。针对现有算法中图像... 可见光和热红外成像机理不同,因此可以捕获的目标信息也不同。基于可见光和热红外的双模视觉跟踪器,可以综合利用两种模态内在的信息关联性和互补性,降低单模态信息的局限性和不确定性,提高视觉系统的鲁棒跟踪能力。针对现有算法中图像融合或特征拼接的方式不能充分挖掘可见光与红外图像的关联和互补信息等问题,设计了一种端到端学习的红外与可见光双模孪生网络跟踪器,网络同时学习可见光和热红外图像的深度特征,通过模态内与模态间的双注意力机制,对两种模态的特征进行自适应融合,最终实现可见光和热红外双模视觉跟踪;同时,针对孪生网络对目标与语义背景区分能力不足的问题,引入在线分类模块,通过分类器在线学习,减少干扰物对跟踪的影响,适应目标在跟踪过程中的变化。实验结果表明,所提算法能够有效地提高跟踪器的性能,在可见光与热红外跟踪基准数据集GTOT上的精确率和成功率分别约为90.6%和73.8%,分别比基线算法的提高了约5.5%和4.3%。故所提出的方法相比其他先进的跟踪算法,总体性能更好。 展开更多
关键词 目标跟踪 可见光/热红外 孪生网络 注意力机制 深度学习
下载PDF
基于特征融合的RGBT双模态孪生跟踪网络 被引量:7
2
作者 申亚丽 《红外与激光工程》 EI CSCD 北大核心 2021年第3期228-234,共7页
热红外成像技术被广泛地应用于军事、遥感和安防等领域中的目标跟踪,但热红外图像对对比度较低、目标模糊等跟踪场景效果一般。因此,将热红外图像与可见光图像进行融合提高跟踪性能具有重要意义。与基于可见光或热红外图像的单模态跟踪... 热红外成像技术被广泛地应用于军事、遥感和安防等领域中的目标跟踪,但热红外图像对对比度较低、目标模糊等跟踪场景效果一般。因此,将热红外图像与可见光图像进行融合提高跟踪性能具有重要意义。与基于可见光或热红外图像的单模态跟踪算法相比,基于可见光/热红外(RGB/Thermal,RGBT)图像的双模态跟踪算法对光照变化、云雾遮挡具有更强的鲁棒性。提出了一种基于特征融合的RGBT双模态孪生跟踪网络架构。该网络将双模态图像中提取的深度特征进行融合,提高目标外观特征的判别力。该网络可以利用训练数据进行端到端的离线训练。公开数据集RGBT234上的实验结果表明,所提出的RGBT双模态孪生特征融合跟踪网络能够实现复杂场景下鲁棒持续的目标跟踪。 展开更多
关键词 可见光/热红外 双模态跟踪 孪生网络 特征融合
下载PDF
RGBT双模态加权相关滤波跟踪算法 被引量:2
3
作者 熊跃军 张海涛 邓黠 《信号处理》 CSCD 北大核心 2020年第9期1590-1597,共8页
与基于可见光的单模态跟踪算法相比,基于可见光/热红外(RGB-Thermal,RGBT)的双模态跟踪算法对光照变化具有更强的鲁棒性。但在实际应用场景中,双模态跟踪算法仍然会受到局部遮挡目标形变的影响。为了解决以上问题,本文提出了一种可见光... 与基于可见光的单模态跟踪算法相比,基于可见光/热红外(RGB-Thermal,RGBT)的双模态跟踪算法对光照变化具有更强的鲁棒性。但在实际应用场景中,双模态跟踪算法仍然会受到局部遮挡目标形变的影响。为了解决以上问题,本文提出了一种可见光/热红外RGBT双模态加权相关滤波跟踪算法。该算法首先利用可见光图像和热红外图像联合求解权重图,然后利用权重图引导相关滤波器求解过程,最后根据权重图推断前景目标是否被遮挡。该算法在公开数据集RGBT234上的结果表明,本文提出的RGBT双模态加权相关滤波跟踪算法能够有效处理目标局部遮挡和目标畸变等情况,实现复杂场景下鲁棒持续的目标跟踪。 展开更多
关键词 可见光/热红外 双模态跟踪 加权相关滤波器
下载PDF
Fusion of VNIR and Thermal Infrared Remote Sensing Data Based on GA-SOFM Neural Network 被引量:1
4
作者 WANG Chongchang YANG Guijun MA Zhen li XING Zhurong 《Geo-Spatial Information Science》 2009年第4期271-280,共10页
The multi-source data fusion methods are rarely involved in VNIR and thermal infrared remote sensing at present. Therefore, the potential advantages of the two kinds of data have not yet been adequately tapped, which ... The multi-source data fusion methods are rarely involved in VNIR and thermal infrared remote sensing at present. Therefore, the potential advantages of the two kinds of data have not yet been adequately tapped, which results in low calculation precision of parameters related with land surface temperature. A new fusion method is put forward where the characteristics of the high spatial resolution of VNIR (visible and near infrared) data and the high temporal resolution of thermal infrared data are fully explored in this paper. Non-linear fusion is implemented to obtain the land surface temperature in high spatial resolution and the high temporal resolution between the land surface parameters estimated from VNIR data and the thermal infrared data by means of GA-SOFM (genetic algorithms & self-organizing feature maps)-ANN (artificial neural net-work). Finally, the method is verified by ASTER satellite data. The result shows that the method is simple and convenient and can rapidly capture land surface temperature distribution of higher resolution with high precision. 展开更多
关键词 FUSION VNIR data thermal infrared land surface parameter GA-SOFM mapping ANN
原文传递
上一页 1 下一页 到第
使用帮助 返回顶部