多模态融合下宠-主情感交流产品交互设计研究

针对宠-主交流产品情绪识别方式缺失或单一,宠-主情绪状态难以及时掌握把控,进而造成宠-主情感交流障碍的问题,提出多模态计算框架下的宠-主情感交流产品双向交互设计原则,实现对宠-主情绪精准识别,交互反馈,以促进宠-主情感交流。在现有人类情绪识别的音频分析与计算机视觉跨模态融合基础上,针对猫咪意象需求的模糊性与主人情感需求的多样性,联结宠-主情感与其对应需求,提出多模态视域下宠物情绪识别新方法和宠-主情感交流产品双向交互设计模型。面向宠-主情感交流的多模态情感交互模型,通过情绪识别、需求确定、交互反馈,可以提升宠物产品智能化,准确把握宠-主情绪,促进宠-主沟通的良性循环。