基于双分支孪生网络的目标跟踪

基于孪生网络的目标跟踪算法将跟踪问题建模为目标特征和搜索区特征之间的匹配问题。匹配程度通常是根据二者特征之间的相关响应来衡量。目前该衡量方式仍存在以下局限:一方面,对目标的不同区域使用的是相同的特征提取器,没有考虑到目标内部和轮廓处的区别;另一方面,在特征之间相关性的求解过程中,模板空间结构是固定的,无法很好地应对目标形变时的情况,鲁棒性较差。为解决上述问题,提出了一种双分支孪生网络目标跟踪算法SiamDAH(Double Adjust Head Siamese Network for Object Tracking),其中双分支结构旨在考虑目标内部区域和轮廓处的表征需求差异。此外,提出了一种改进的逐像素相关模块,有效降低了传统相关操作时模板结构固定带来的问题。在GOT-10k数据集上的实验结果表明,提出的算法在AO、SR0.5、SR0.75指标上较基准算法分别实现了3.4%、7.0%、2.3%的提升。在NVIDIA RTX 2080Ti上速度可达90 frame/s。

基于DiMP模型迁移重组的RGBD目标跟踪

深度图可以提供运动目标所处的三维空间结构信息,因此可以用来提升跟踪性能。但目前缺少基于RGBD的目标跟踪数据集,无法直接训练RGBD输入下的深度学习跟踪器。对此,提出了一种基于知识对齐的模型迁移重组算法,可以方便地将在其他RGBD任务上训练得到的模型迁移到基于DiMP的跟踪算法上来,并且对于不同的跟踪对象不需要重新计算迁移参数。另外,针对深度图信息不稳定的问题,提出了一种高效的平滑稳定算法。在VOTRGBD数据集上的实验结果表明,迁移融合后的特征可以显著提升目标和背景之间的判别性,有效提升跟踪器的性能。

多相机式仿生曲面复眼的标定与目标定位

根据仿生曲面复眼具有众多子眼、多通道成像的特性,对多相机式仿生曲面复眼标定与目标定位方法展开研究,结合非平行双目视角下三角测量与相机坐标系映射的方法,提出一种仿生曲面复眼目标定位方法。根据复眼定位对子眼间具有较大重叠视场的要求,用Unity3D仿真软件设计了总视场角超过180°的17眼仿生曲面复眼,并制备了实物样机。通过张正友标定法,完成复眼系统中17个子眼的单目标定和38对相邻子眼间的标定,在此基础上,根据复眼相邻子眼间有较大重叠视场的性质,提出了一种不相邻子眼的外参标定方法,实现复眼坐标系的统一。搭建实验平台,结合RANSAC优化后的ORB特征匹配方法,用复眼样机对处于不同位置无人机模型进行三维定位实验,并对定位结果展开误差分析。实验结果表明,该复眼标定及目标定位方法应用于所制作的样机,能实现较高精度大视场目标定位。