多模态感官系统与语言研究

本文旨在梳理多模态感官系统与语言跨学科研究的部分成果。文章首先澄清术语的用法。汉语"多模态"对应于英文的肌multi+modality,即神经医学定义的"多模态感官系统"。文献梳理按两条主线进行:一是基于单模态感官的语言学理论,包括乔姆斯基的语言器官论和福德的言语模块论;二是基于多模态感官的语言学理论,包括皮亚杰的经验建构主义、卡密洛夫一史密斯的成长理论、琼森的造义理论,以及笔者的多模态充盈论。文章同时介绍胚胎学对听觉模态、视觉模态的研究,以及触觉与情感依附的研究等。文章重点讨论多模态研究的三个理论问题:多模态转换、多模态搭配与多模态过滤器。