基于深度学习的增强装配智能人机交互方法

针对增强装配系统智能化水平低、系统与用户交互性差的问题,提出一种基于深度学习的零件拾取感知方法。采用目标检测算法提取手部和零件的类别与位置信息,并通过区域相交判定方法获取图像感兴趣区域。搭建分类网络以识别单帧深度图像中零件的拾取状态,以此为基础,提出连续帧状态识别方法消除单帧识别结果误差。实验结果表明,在航空发动机零件装配过程中,所提方法单帧感知速度在0.031 s内,连续帧下准确率可达100%,满足现场识别准确率和速度要求。