基于音视频信息融合的目标检测与跟踪算法

针对单一视觉跟踪算法易受遮挡影响的缺陷,提出一种基于音视频信息融合的目标检测与跟踪算法。整个算法框架包括视频检测与跟踪、声源定位、音视频信息融合跟踪3个模块。视频检测与跟踪模块采用YOLOv5m算法作为视觉检测的框架,使用无迹卡尔曼滤波和匈牙利算法实现多目标的跟踪与匹配;声源定位模块采用十字型麦克风阵列获取音频信息,结合各麦克风接收信号的时延计算声源方位;音视频信息融合跟踪模块构建音视频似然函数和音视频重要性采样函数,采用重要性粒子滤波作为音视频融合跟踪的算法,实现对目标的跟踪。在室内复杂环境下对算法性能进行测试,结果表明该算法跟踪准确率达到90.68%,相较于单一模态算法具有更好的性能。

通用工业相机的炸点瞬时位置测量模拟研究

为解决当前已有炸点空间位置探测系统存在的结构复杂、成本昂贵的问题,进行了基于通用工业相机的炸点瞬时位置测量的模拟研究,设计了LED瞬态闪光单元,通过光电传感器探测LED产生的光信号并转换为电信号。经过信号处理,根据信号的幅值控制2台普通工业相机同时曝光进行抓拍,然后对采集的图像进行数字图像处理,获取2幅图像中爆炸光斑中心的位置坐标,再结合2个相机之间的相对位置关系,最终解算出炸点的空间位置坐标。实验结果表明:在距离测量系统24 m、32 m、48 m处,最大误差绝对值在水平X方向为127 mm,在竖直Y方向为68 mm,在深度Z方向为279 mm。系统具有响应速度快、精度高、成本低等优点,满足系统探测要求。

阵列细丝直径实时快速检测系统设计

为实现并行化、非接触、实时的细丝直径测量,设计了一种基于复杂可编程逻辑器件(complex programmable logic device,CPLD)的阵列细丝直径实时快速检测系统。阵列化传感系统,使用CPLD解算直径,并行测量多条细丝。显著降低了系统的数据传输量,缩短了直径解算时间,提高直径检测频率至5 kHz,实现了对24根细丝阵列并行测量。在0.1 mm~0.3 mm及0.3 mm~1.0 mm的直径范围内动态测量重复精度分别为3.5μm和8.3μm,动态重复性误差百分比绝对值分别低于1.21%与1.43%,满足了实时快速检测阵列细丝直径的需求。

增强现实显示的偏振不敏感光栅波导研究

一般的光栅波导式头戴显示器因偏振敏感不能同时使用横电(TE)偏振光和横磁(TM)偏振光进行成像显示。为解决该问题,基于遗传算法与严格耦合波分析法提出了一种偏振不敏感光栅的设计方法。制作了偏振不敏感的光栅波导,进行了光栅波导的衍射效率测量实验。该光栅工作波长为532 nm。耦入光栅对TE偏振光的平均衍射效率从6.1%提高到了21.0%,对TM偏振光的平均衍射效率从13.7%提高到了40.5%,对非偏振光的平均衍射效率从9.9%提高到了30.7%。耦出光栅对TE偏振光的平均衍射效率从3.1%提高到了12.1%,对TM偏振光的平均衍射效率从0.8%提高到了10.7%,对非偏振光的平均衍射效率从1.9%提高到了11.4%。搭建了显示系统样机,测试表明显示效果清晰明亮。实现了30°×22°的大视场角,验证了偏振不敏感光栅波导设计方法和非偏振图像源在增强现实领域的可用性,为波导型增强现实系统的研究与发展提供一定的指导作用。