Visualization of isomorphism-synesthesia of colour and music

Music and colour,as human hearing and visual art,are closely related to human psychological feelings and symbolic associations.There is an isomorphic relationship between music and colour.The article uses the concept of“synesthesia”in psychology and the“co-construction”relationship in mathematics as a bridge,based on Kandinsky’s“inner sound”theory and Mallion’s“tone-colour system”,an interdisciplinary theoretical model of“timbre isomorphism synesthesia”(ISCM)is constructed.At the practical level,based on the ISCM theory,a set of timbre synesthesia visualization tools ASAH and visualization processes are designed,through music data input,graphics mapping visualization,colour mapping visualization,real-time interactive visualization,and finally output timbre synesthesia visualization works.In order to avoid the visual homogenization caused by algorithm design,ASHA has set up a custom editor,which emphasizes the individual differences and multi-sensory experience of tonal synesthesia visualization.

意境美学与气氛美学的跨文化互释

在全球化语境下,作为中国美学之独特形态的意境美学,与西方晚近兴起的气氛美学之间存在颇多可比照阐发、交流互鉴之处。在主客关系上,意境美学与气氛美学都打破了传统美学主客二分的思维方式,分别以“心-物”模式和“身-物”模式致力于审美主体与对象之间的间性关系的建构;不过意境美学融入与运用了综合的审美心理机能,侧重审美活动中精神性体验,将气氛美学中建立在感知学之上的“自然之物”进行了抬升和跨越,故作为意境美学基本单位的意象可以视为气氛之物的形而上之维。正是由于以上关联之处,一方面通感联觉是两种美学重要的审美生理-心理基础之一,另一方面作为审美范畴的“意境”和“气氛”都处于不断生成的状态之中,因而审美主体获得的美感体验都是历时性的情感体验,是一种“绵延”的美感。同时,意境美学和气氛美学都是在空间中进行审美,共同关注意境与气氛所营造的“虚实空间”。不仅如此,在情景创设、情调营造等方面,意境美学与气氛美学又可落实为一种共通的审美创造方案。基于以上事实,在意境美学与气氛美学之间进行广泛而深入的对话,既可为中西美学在交流互鉴中实现创新融合提供案例,还可在一定程度上激活中国古典美学的当代价值。

具身的诗意:跨专业通感设计的关联主义教学实验

本文介绍的是笔者近几年在跨专业与跨感官交叉设计教学中的探索。以“具身通感”实现“诗意体验”为设计教学目标,课程实验如何基于数字时代的关联主义理论,将不同专业背景、知识领域、工具路径和组织方式建立深度关联,培养学生在认知、体验与设计实践中具有高度自主的学习能力,尝试一种以知识关联与组织协同为核心的新型设计教学模式。

新媒体时代下视觉传达设计中的通感体验

目的 -通过研究分析新媒体技术加持下的通感体验和视觉传达设计,将这两者有机结合,以达到传达信息的最佳效果,给受众更好的体验。方法 -本文分析了新媒体时代下通感体验的表达基础和表达形式,以及视觉传达设计因媒介转变衍生出的创新设计形式,并以此为立足点探讨了新媒体时代下视觉传达中通感体验的设计方法。结果 -在新媒体时代下,视觉传达设计想要更加快速有效地传递,必须与多个感官表达相关联,多层次地调动受众的感官机能,更完美地表达出所要传递的信息。

“色可暖,话可凉”:英语温觉词的通感模式及其认知机制

温觉是触觉的一种,属于人类最基本的体验,其词汇通感模式是隐喻研究的重要问题。在体认语言学理论视角下,对英国国家语料库(BNC)中基本和一般温觉词(“cold/hot/cool/warm”;“fiery/burning/chilly/icy”)的通感使用频率与实例进行统计和分析,可以探究其映射规律和生成机制。研究发现,英语温觉词在整体上均能通感到视、听、味、嗅四种感觉域,通感率排序从高到低为视觉>听觉>味觉>嗅觉;基本温觉词通向味嗅觉的比例较低,部分一般温觉词无味嗅觉域上的通感表达。结果表明,通感是人类体验世界的基础,其映射模式和生成机制契合“现实—认知—语言”基本体认框架:某一感官信息通过意象图式在现实和认知之间交互形成概念,再由认知加工将概念转化为描述其他感官的语言表达。然而,受词汇编码强度和生理特性等因素的影响,具体词汇通感模式略有差异。

基于5G/5G-A的全要素车联网行业综合应用实践

由于5G技术的演进为智能网联汽车开展各类自动驾驶,尤其是高级别自动驾驶所需的全要素信息综合应用提供了新的解决思路和方案,因此从技术演进、解决方案、性能测试以及应用孵化4个方面阐述5G/5G-A最新技术在车联网领域的相关性能测试和应用试点,并提供全要素车联网综合解决方案。

元宇宙视域下虚拟影响者的立体性通感体验设计研究——以短视频平台传播为中心

在元宇宙趋势盛行的当下,随着短视频平台应用率的大幅上升,新型虚拟形象应用也成为短视频平台的聚焦热点。通过分析比较短视频平台不同功能类型的虚拟影响者间感官体验元素的应用,探讨虚拟影响者的通感体验设计原则,解决虚拟影响者在短视频平台中视觉、互动、情感层面的设计问题。基于通感体验理论下借助案例分析研究方法,对短视频平台虚拟影响者进行对比分析。总结归纳出偶像型虚拟人、服务型虚拟人、超写实虚拟人的通感体验设计趋势,借助这3种类型提升虚拟形象目标受众的用户体验,有助于实现虚拟影响者在短视频媒介的跨界传播。

音乐联觉机制在抑郁症患者中的应用

目的探讨音乐的联觉效应在护理抑郁症患者中的应用。方法将2021年3月—2022年3月郑州中医院脑病一科收治的52例抑郁症患者随机分为2组。一组是常规药物治疗的对照组,实施传统护理方式;另外一组为音乐联觉机制与药物治疗相结合的观察组,实施多元化护理方式。以住院时间为周期,以2周为节点使用贝克抑郁量表第二版(BDI-Ⅱ)评估抑郁症状。护理人员对观察组和对照组的睡眠质量进行检测分析。结果干预后,2组患者的BDI-Ⅱ评分均低于干预前,且观察组低于对照组,差异具有统计学意义(P<0.05)。观察组比对照组的总睡眠时长、觉醒次数少、睡眠潜伏期短、睡眠效率高,且入睡后觉醒时间短。结论采用多元护理与音乐联觉机制相结合的治疗方法,治疗效果比单纯常规治疗效果明显,音乐联觉机制在治疗抑郁症患者的过程中有显著作用。

异质同构,传递基因——文化景观视角的历史城区更新形式探讨

从人文地理学的文化景观角度切入,分析城市形态的文化内涵与空间视觉特征的关联性,以及其在城市历史地段更新行动中指导空间形式有依据地渐变演进的可能性,并借助心理学认知原则对这一过程中文脉基因的可识别性进行论证,提出以“异质同构”的形式更新策略来响应城市历史意象和历史信息的延续和维护。

基于“联觉-通感”层次分析的沉浸式展陈交互设计研究

为了把沉浸式展陈中的多感官交互上升到情感交互,发挥出数字媒介艺术的优势,在分析沉浸式展陈交互设计现状的基础上,从多感官整合的交互感知建设,“联觉”效应下的交互认知赋意,情感共鸣下的“通感”语境创建三个方面探究了交互设计中“联觉-通感”层次模型,并以“新艺维工业设计”产品展陈交互设计实践为例,验证了基于“联觉-通感”层次分析的交互设计方法能够较好地改善沉浸式展陈设计中人的交互体验,增强人对企业文化内涵的理解。

英语联觉音学习意义与方法研究——以sn-所构词汇为例

针对现阶段联觉音语素应用不足、词汇学习效果不佳的窘境,文章引入sn-结构示例,简要阐述其隐喻性、象征性内涵,明确其在“口鼻”相关行为中的表现作用,深入分析联觉音学习的价值、意义,同时指出其融合应用可以显著降低英语词汇理解、接受难度,提升学习者对构词逻辑、规律的认知,帮助其拓宽词汇学习视野、思路。在此基础上归纳可用的联觉音学习方法,提出了挖掘形义连接关系、关注音义转换逻辑、建立文化认知视角等系列改进举措。

基于联觉实验与色彩网络的传统香薰包装设计研究

目的 香味与色彩和情绪具有紧密的联系,色彩强烈影响着香薰产品的使用感受与体验。基于联觉实验可获得香薰对应色相与感性意象,便于构建色彩网络辅助香薰产品进行色彩设计。方法 在对中国传统香薰进行深入调研的基础上,选取具有代表性的几款香薰作为研究材料。首先进行香-色联觉实验,获得香薰对应色相、情绪关系与感性意象,然后据此选取自然图片进行色彩微调,建立香-色图像数据库,最终对图片进行色彩提取并构建色彩网络模型,获得香味对应的主辅色及色彩关系,将其应用于中国传统香薰产品的配色方案与包装设计中。结论 利用嗅觉与色彩视觉之间的情绪关联作用进行联觉实验,获得的香味对应的色彩和谐自然、感性意象生动明晰,将其应用于中国传统香薰产品的设计中能够唤醒使用者的情感共鸣,带来更好的使用体验。

食品包装设计中的通感隐喻表达与方法

目的包装的通感体验是吸引消费者、提高产品销量的有效方式。主要对食品包装的通感隐喻表达与方法进行探讨,为食品包装的通感隐喻设计提供参考。方法首先从不同的学科角度出发,明确通感隐喻的概念与设计的关系、特征;其次从消费者体验出发,分析基于通感隐喻的食品包装设计要素,并根据设计要素提出四个对应的设计方法;最后结合相关的案例和设计实践,探讨方法的实际应用。结论通过对食品包装的通感隐喻表达与方法的研究,明确了食品包装的通感隐喻设计概念,以及其具身性和直觉性的设计特征,提出了食品包装通感隐喻设计的具体方法:直观的知觉表达、行为的融入与深化、材料媒介的丰富、系统化场景引导。为食品包装的通感隐喻设计提供了新的思路与参考,对提升消费者体验,促进产品的推广具有现实意义。

机器联觉:通信与多模态感知的智能融合

通信感知一体化技术局限于雷达感知与通信在频谱和硬件层面上的共享,不足以提升新兴应用场景中通信与感知的性能.在涵盖海量多模态感知和通信数据的场景中,通信感知一体化技术应向考虑多模态感知的方向进行范式演进,即通信与多模态感知的智能融合.受人类联觉现象启发,文中系统化建立并论述通信和多模态感知智能融合的范式——机器联觉.首先,总结机器联觉3种典型工作模式:唤起模式、增强模式、合作模式,系统全面给出通信和多模态感知之间相互辅助增强的目的与方式.然后,介绍机器联觉研究的数据基础(通信与多模态感知智能融合仿真数据集)和理论基础(通信与多模态感知联觉机理).最后,综述当前机器联觉的研究现状,并展望未来的研究方向.

基于感知图像信息的无人机信道路径损耗预测

为了更好地促进6G无人机对地通信技术的应用和发展,完善无人机对地通信系统设计理论基础及满足6G通信的安全性和有效性的需求,开展6G无人机对地通信场景下基于感知图像信息的信道路径损耗预测研究.首先,基于感知数据仿真平台AirSim和无线信道仿真软件Wireless InSite,构建动态无人机对地通信场景下的混合通信与感知智能融合数据集,为探索物理空间和电磁空间的映射关系提供重要的数据支撑.然后,基于构建的数据集,建立物理空间的感知图像信息与电磁空间的路径损耗信息之间的映射关系,实现6G无人机对地通信场景下的实时路径损耗预测.最后,通过仿真测试,将模型预测结果和测试集进行对比,验证模型的准确性.

联觉段位:中国新诗的有机性叙事

中国新诗叙事的视觉段位和听觉段位是联通的;它们融合成有机性的“联觉段位”或“通感段位”。中国新诗叙事重新处理词语固有的语法搭配,使词与词、词与句、句与篇、“叙事主笔”与“叙事插笔”之间相互扭结勾连,借意象、字词、句子、诗节、情节、整首诗等形成化典或互文;此外,还通过“片段段位”或“杂语段位”,使其原有的视觉段位和听觉段位产生延宕,最终使其联觉段位也随之发生结构性变化,诗意由此扑面而来。中国新诗叙事联觉段位的有机性写作,既是中国新诗求真意志之使然,又是一场场灵魂的历险,还是一次次语言的探索。

音乐与文学的内在关联性思考

文学与音乐存在着与生俱来的内在默契。究其源头,始于语言自古以来表情达意的功能习惯,它无形地渗透进音乐与文学作品的创作当中。音符与文字,是音乐与文学在各自创作中所使用的工具符号体系,它们有着各不相同的语法排列组合,却形成具有异曲同工般的旋律走向和语意背景,因此音乐与文学之间蕴藏着除主题相近性之外更内在的关联。

同构联觉的建构在钢琴作品诠释中的实证分析——以德彪西的《月光》和莫奈的《月光下的航海图》为例

音乐作为一种抽象的存在,其非空间造型性与非指意符号性决定了它无法具体的描绘所要表现的对象,也无法通过符号直接呈现想要表达的含义。在钢琴作品的诠释中,同构联觉作为音乐与其表现对象之间转换的中介环节,可以拓展艺术思维,启发在二次创作中塑造鲜活的艺术形象,更好的表达作品的内涵。

基于通感理论的产品设计语义程式构建研究

体验经济时代之下,用户对产品的语义需要已经开始向更多维度发展,有必要在以用户为中心的理念下,结合通感理论对产品设计的语义程式进行分析。文章首先从通感理论相关概念出发,探索用户体验的特性,在保障产品基本功能的基础上,进一步挖掘用户不同感官的联系和信息的相互转化,并将其运用在产品设计语义程式中。其次,通过对通感语义程式的产生及应用流程的梳理以及对过程中的设计师元素、用户元素、产品元素的描述,分析通感关键要素及其对产品设计的作用。最后,基于用户体验的三个阶段提出相对应的设计策略,即产品设计语义程式的构建应遵循关联性、异化性、共鸣性,从而使用户获得更加生动深刻的体验。