音乐声的音色感知特征与图像的纹理特征的关联研究

本文主要研究音乐声的音色感知特征与图像的纹理之间的关联关系并建立音色与纹理的匹配模型.首先对Brodatz纹理库中的图片提取纹理特征,然后利用纹理特征对纹理图片进行系统聚类和多维尺度分析,挑选出18张用来做主观评价实验的纹理图片.通过主观评价实验,得到音色感知特征值以及音色和纹理的匹配关系数据,并基于此数据分别计算了匹配(或不匹配)的音色感知特征纹理特征之间的皮尔逊相关系数,相关系数绝对值最高达0.75,证明了二者之间存在强烈关联.最后使用逻辑回归、随机森林、多层感知神经网络对音色感知特征和纹理之间的匹配关系进行预测,得到了准确率较高的预测模型,说明通过音色感知特征和纹理特征预测二者匹配关系是可行的.

视听觉融合效应及其信息融合处理方法综论

本文将视觉信息和听觉信息相互影响并共同作用于人的现象称为视听觉融合效应,并且针对该效应提出了以信息融合处理为核心的研究方法。首先,本文由日常生活中的普遍现象发现视听觉融合效应。其次,在研究和评判相关领域研究现状的基础上,本文明确了视听觉融合效应的研究对象及其基本概念。再次,以总体研究框架为依据,本文给出了研究视听觉融合效应的研究方法与技术路线,并对其可行性进行了论证。接着,本文分析了视听觉融合效应的研究重点与难点。最后,本文展望了视听觉融合效应及其信息融合处理的广阔的应用前景。

音乐声的音色感知特征与情感的关联研究

本文主要研究音乐声的音色感知特征与情感的关联关系.首先通过多维尺度分析方法确定了一个5维的情感空间;然后针对72种音色的音阶素材和48种音色的旋律素材进行情感标注主观评价实验,得到音色素材的情感数据;按照演奏内容、时域特性以及乐器类型这3种因素进行分类,分别研究了音色感知特征和情感的相关关系;采用多维偏好分析方法和单因素方差分析方法,讨论了演奏内容、时域特性以及乐器类型这3种因素对音色感知特征与情感的影响;最后采用多元线性回归建立了一组音色感知特征与情感关系的数学模型.实验结果表明,音色感知特征是影响音乐情感的重要因素,部分音色感知特征与情感维度之间存在较强的相关性,构建的关联模型对于5个情感维度具有较好的预测能力.