基于唇部灰度能量图的唇读方法

针对单视觉通道唇读系统的唇部特征提取问题,提出了基于唇部灰度能量图的特征提取方法.该方法将表示字或词的图像序列投影到二维灰度能量图上,不但统一了输入数据的维数,而且较好地保留了序列图像的运动信息.针对模板匹配方法对模板的依赖问题,文中将单训练样本唇部灰度能量模板图推广至多训练样本.文中还就唇部定位提出中心定位法.实验结果表明:在单帧图像特征维数相同的情况下,文中唇读方法的识别率比传统的对单帧图像分别提取特征的方法有较大的提高,运算时间明显缩小;双训练样本比单训练样本的识别率平均提高了11.29%;唇部精确定位后的识别率比定位前提高2%以上,系统最高识别率达90.63%.