注意力需求对指别语言-手势模态间配置的影响

指别可以采用语言、手势及其不同组合来进行。本文采用实验法探究在指物和指别空间时注意力需求对语言指别和手势指别两个模态的影响,并对模态间的配置进行语用和认知解释。实验结果表明,注意力需求影响指别语言和指别手势的指示力;说话人在不同注意力需求水平上通过模态的指示力和认知负荷衡量模态重要性,并依据经济原则(即聚焦效果最大化,认知负荷最小化),进行模态间的注意力资源分配,完成模态配置,实现聚焦需求。研究发现对多模态互动的认知研究提供了启示。