McGurk效应的影响因素与神经基础

McGurk效应(麦格克效应)是典型的视听整合现象,该效应受到刺激的物理特征、注意分配、个体视听信息依赖程度、视听整合能力、语言文化差异的影响。引发McGurk效应的关键视觉信息主要来自说话者的嘴部区域。产生McGurk效应的认知过程包含早期的视听整合(与颞上皮层有关)以及晚期的视听不一致冲突(与额下皮层有关)。未来研究应关注面孔社会信息对McGurk效应的影响,McGurk效应中单通道信息加工与视听整合的关系,结合计算模型探讨其认知神经机制等。

视听跨通道言语知觉的McGurk效应:证据与模型

McGurk效应是视听言语知觉研究常用的范式,揭示视觉信息对言语感知和语音识别的作用。回顾其40多年研究成果发现,该效应受刺激的视听语音信号特征和质量、个体特征、注意、发展、语言和文化等因素的调制,发展因素和跨语言的研究结果存在差异;其认知过程是分阶段进行的,加工的脑区可能涉及除颞上和额下皮层以外更广的区域,不同群体视听整合的神经机制亦可能不同。同时,计算模型具有不可忽视的研究价值,未来可将之应用于特殊群体、视听超音段语音刺激等研究。

情绪信息的多通道整合

自然环境中人类情绪信息的交流是依靠多个感觉通道实现的,多通道整合是情绪加工的基础。近年来的行为学、电生理学与神经成像的研究表明,情绪信息的加工具有跨通道自动整合的特点,它发生在认知加工的早期阶段,与颞上回、颞中回、海马旁回和丘脑等脑区密切相关。不同情绪的整合既有共同的神经基础,又有各自独特的加工区域。情绪信息的整合机制还可能与加工类型及注意资源有关。在未来研究中,实验的标准化、动态化、自然化有助于提高研究的准确性和研究间的可比性,而对特殊群体的研究,以及综合研究情绪加工与注意等其他认知过程则有助于我们进一步探索多通道整合的神经机制。

汉语母语者视听双通道言语知觉的特点及发展研究

以30名小学二年级学生2、4名小学五年级学生和29名大学一年级学生为被试,运用McGurk效应研究范式对汉语母语者视听双通道言语知觉的表现特点、发展趋势等问题进行了探讨,三个年龄阶段被试均接受纯听和视听两种条件下的测查,被试的任务是出声报告自己听到的刺激。结果发现:(1)汉语为母语的二年级小学生、五年级小学生和大学生在自然听力环境下的单音节加工中都受到视觉线索的影响,表现出了McGurk效应;(2)二年级小学生、五年级小学生和大学生受视觉言语影响的程度,也就是McGurk效应的强度没有显著差异,没有表现出类似英语母语者的发展趋势。该结果支持了McGurk效应"普遍存在"的假说。

基于Morlet小波变换的EEG时频分析

Morlet小波变换是适用于EEG时频分析的一种比较成熟的方法,在国外的医学、心理学和认知神经科学研究中已被广泛使用。本文首先阐述了Morlet小波变换的基本原理和基于Morlet小波变换的时频分析方法的特点,然后利用此类方法对实际的EEG数据进行探索性的分析。

视觉言语在汉语母语儿童和成人英语语音知觉中的作用

该研究运用McGurk效应研究范式对汉语母语儿童和成人英语语音知觉中视觉言语的作用进行了分析和比较。22名五年级小学生和29名大学一年级学生在纯听、视听一致、视听不一致和纯视等条件下对假词开始或结束的音是/s/还是/θ/做出选择反应。结果发现:五年级学生在四种条件下的英语语音知觉正确率没有显著差异;大学生在纯听和视听一致条件下的正确率显著高于视听不一致条件和纯视条件。总的说来,视觉言语在汉语母语者英语语音知觉中的作用较小,但是与儿童相比,成人表现出了受视觉言语影响相对更强的趋势,这与英语母语者视听双通道言语知觉的发展趋势类似。

汉语母语儿童和成人视听双通道英语语音知觉的训练研究

本研究通过前测-训练-后测的实验程序,对22名五年级小学生和29名大学一年级学生在不同测查条件下知觉英语辅音/s/和/θ/的可塑性情况进行了考察和比较。两个年龄阶段被试在前后测中均接受纯听、视听一致、视听不一致和纯视条件下的测查,训练时两个年龄阶段被试中分别有一半接受纯听训练,另一半接受视听训练,训练时间历时10天,每天30分钟左右。对训练效果的分析发现:(1)接受纯听和视听训练的五年级学生在纯视测查条件下知觉英语辅音/s/和/θ/的提高率有显著差异,视听训练被试显著高于纯听训练被试,在其他条件下没有显著差异;(2)接受两种训练的大学生在所有条件下知觉英语辅音/s/和/θ/的提高率都没有显著差异。说明儿童表现出了更强的视听双通道语音知觉的可塑性。

噪声下自闭症儿童视听双通道言语知觉特征

研究噪声环境中自闭症儿童单通道和视听双通道言语知觉特征及发展趋势。结果发现,自闭症儿童在纯听、视听一致下言语辨识率显著低于普通儿童;自闭症儿童在视听一致下的视觉增益和视听不一致下的McGurk效应强度显著低于普通儿童;纯听和视听一致下13~16岁儿童言语辨识率显著高于6~12岁儿童,但是McGurk效应强度差异并不显著。结果表明,噪声环境中自闭症儿童的单通道和视听言语知觉能力不足,其视听整合能力与普通儿童存在显著差异。

不同语音知觉训练方式对汉语儿童和成人英语语音产出的作用

通过前测-训练-后测的实验程序,首先让22名五年级小学生和29名大学一年级学生分别在纯听或视听训练条件下学习知觉语音/s/和/θ/,然后对训练后他们产出语音/s/和/θ/的效果进行比较,以此来探讨不同语音知觉训练方式对儿童和成人语音产出的迁移作用。结果发现:(1)对于儿童来说,接受视听训练的被试在产出语音/s/和/θ/的准确性等级上的提高显著高于纯听训练被试;(2)对于大学生来说,接受两种训练的被试在产出/s/和/θ/的准确性等级上的提高率没有显著差异。以上结果表明,视听训练方式对语音产出的促进作用在儿童身上更加明显,早期的视听双通道语音知觉训练非常重要。

汉语母语者视听言语知觉发展趋势研究

6~12岁儿童、13~18岁青少年和20~30岁成人被试各30名,运用McGurk效应研究范式对汉语母语者视听言语知觉的发展趋势进行探讨。所有被试需要接受纯听和视听两种条件下的测试,其任务是出声报告自己听到的刺激。结果发现:(1)三个年龄阶段汉语母语者被试在安静听力环境下的单音节加工中都受到了视觉线索的影响,表现出了McGurk效应;(2)三个年龄阶段汉语母语者被试McGurk效应的强度存在显著差异,其受视觉言语影响的程度表现出随年龄增长而增强的发展趋势;(3)13岁以后汉语被试在视听一致下对视觉线索的依赖没有显著增强,但是在视听冲突下视觉言语的影响仍然在逐渐增强。

以汉语为母语的学前听障儿童与健听儿童的视听言语知觉反应研究

目的探讨学前听障儿童与健听儿童的视听言语知觉反应,以及不同辅听模式的听障儿童的视听言语知觉反应。方法以汉语为母语的4~7岁学龄前健听儿童40例和听障儿童37例(双模式11例,双侧人工耳蜗植入12例,22例佩戴助听器14例)为研究对象,采用经典的McGurk研究范式的实验材料对两组儿童分别在纯听、视听一致、视听不一致三种条件下进行视听言语知觉反应测试,要求被试报告自己听到的声音,比较两组结果。结果(1)两类儿童在单音节的辨识中都受到了视觉信息的影响,但听障儿童受视觉信息的影响显著大于健听儿童(P<0.001);(2)在单音节识别中,双侧佩戴助听器的听障儿童的言语辨识正确率低于双侧人工耳蜗植入的听障儿童(P<0.05);(3)McGurk效应在以汉语为母语的学龄前儿童中普遍存在。结论不论是听障儿童和还是健听儿童,在视听双通道条件下,视听言语知觉反应都会受到视觉信息的影响。

自闭症谱系障碍儿童视听双通道言语知觉特征

采用McGurk效应研究范式,探究自闭症谱系障碍儿童和普通儿童在纯听、视听一致和视听不一致言语刺激模式下的言语知觉特征。结果:(1)自闭症谱系障碍儿童在纯听及视听一致刺激模式下的言语辨识成绩显著低于普通儿童;(2)两类儿童言语知觉过程中的视听整合能力差异不显著。结论:自闭症谱系障碍儿童的言语知觉能力存在缺陷,这种缺陷不是由其言语知觉过程中的视听整合能力不足所导致,而可能与其听觉性言语知觉能力不足有紧密联系。