基于深度学习的盲人辅助交流系统研究

为解决盲人由于视觉缺陷而产生的交流障碍,结合普通人交流理论的研究与传播学现有模型,构建了盲人交流模型和盲人辅助交流模型,通过软硬件结合的形式,设计了一个盲人辅助交流系统。硬件系统主要包括智能眼镜和便携计算装置两部分;软件系统主要采集图像和声音,识别交流目标及其外部特征、表情交流行为,其中表情识别技术是运用了ResNet18残差神经网络,实现了实时的表情识别功能,最后合成了声音并输出了结果。