音乐响起。身体开始舞动。表演者的脸上闪现出情感。
似乎这三种语言同时讲述着一个故事。但若将动作与旋律分离,或遮住舞者的面孔,情感意义便会变得面目全非。有时音乐强化了姿态,使其更具说服力。有时身体与声音相悖,创造出富有成效的张力。而常常,它们的结合会出人意料地削弱感受,仿佛信号相互干扰而非叠加。
新研究揭示了一个不明显的结论:我们接收的表达信号越多,情感未必越强烈。效果取决于情感本身——每种情感都存在一个最佳的感知通道组合。
多模态沟通:声音与身体动作中的情感
4月2026日 在同行评审期刊 Music Perception 上发表了一篇文章 Perceived and Felt Emotion in Music and Dance: Multimodal Communication Is Emotion-Specific ——一项关于音乐与舞蹈中感知和体验到的情感如何取决于其传递方式的研究。
该研究由四位学者完成:纽约茱莉亚学院的马尔科·苏西诺、伦敦大学金史密斯学院的曼努埃尔·安格拉达-托特,以及芬兰于韦斯屈莱大学的苏维·萨里卡利奥和比尔吉塔·伯格。团队结合了音乐学、感知心理学以及身体与情感关系研究的专业知识。
研究方法经过精心设计。研究人员使用了一段现场音乐舞蹈表演的录像,并制作了四个不同版本:
- 仅表演者的面部——身体动作被黑色背景隐藏;
- 仅手势和动作——面部被遮挡;
- 仅音乐,无视频画面;
- 完整表演:音乐、面部表情和舞蹈同时呈现。
165名参与者 被随机分配到四种条件中。每个人观看或聆听其中一个版本,并对六种基本情感按百分制评分,回答两个截然不同的问题:
- 表演者表达这种情感的可信度有多高?(感知情感)
- 多么强烈 我自己 感受到这种情感吗?(体验到的情感)
这一区分至关重要。研究人员区分了我们 在理智上识别和理解的内容,以及真正 在我们内心作为直接体验产生的内容。这种区分在艺术情感研究中很少见。
理解一种感觉并不等于体验它
结果对许多人来说出乎意料。平均而言,参与者对表演表现力和说服力的评分大约 高出七分,高于自身情感体验的强度。
想象一下:一个人看得清清楚楚——这是恐惧、愤怒、悲伤。形象清晰,信号明确无误。但情感并未以他观察到的同样强度抓住他。我们能够读懂艺术家的情感信息,而不会完全成为其俘虏。对情感的理智识别与内在体验并非一回事。
在承认情感与体验情感之间存在着间隙。正是在这个空间中,作品、表演者和观众的个人内心世界——带着其所有偏见、记忆和状态——相遇。情感并非按命令产生,即使信号清晰如水晶。
更多并不总是更强:多模态的悖论
研究最引人注目的结果是:音乐、面部表情和动作的结合 并不总是产生更强大的效果,比每个单独元素更强大。此外,增加信息渠道的数量有时会削弱体验。
结果在很大程度上取决于具体的情感。对于某些情感,特定的表达方式尤为重要——例如,对于恐惧,声音是主要的,而面部表情影响最小。对于其他情感,多种信号的结合并未增强效果,反而中和了效果。尤其值得注意的是,在愤怒的情况下,完整的表演版本(音乐+面部+舞蹈)甚至 降低了体验的强度 在观众中。
为什么?研究人员提出了一个解释:额外的信号可能使形象变得过于复杂。音乐传达一种信息——例如,通过不和谐和音量传达攻击性。面部表情增添了一种色调——也许是痛苦或绝望。而动作则提供了自己的诠释——也许是防御或展示力量。这些信号不是简单相加,而是产生多重交互,它们可能相互协调、制造张力或相互矛盾。这种复杂性可能会模糊最初的情感冲动。
然而,重要的是不要赋予这项工作超出其实际展示的内容。科学家们研究了参与者的主观评价,但没有直接测量他们的大脑活动和生理反应。这项研究并未揭示 哪些神经机制 是音乐、面部表情和动作整合的基础。相反,它展示了一个实际结果:观众如何感知多模态刺激并对其产生情感反应,可以通过他们的主观判断来发现和衡量。
舞蹈在发声,音乐在流动
音乐本身就蕴含着运动。它加速又停顿,上升又下降,积累张力并在高潮中释放。即使没有实际的舞者,我们也能在声音中感受到接近与远离、沉重与轻盈、起飞与坠落。节奏是音乐跳动的心脏。
舞蹈使这种无形且非物质的动态变得可见、具象化。身体将节奏转化为步伐,将音乐中的停顿转化为凝固的姿态,将旋律的上升转化为手臂的飞翔。每一个动作都是从一个艺术语言到另一个艺术语言的翻译。
但舞者不仅仅是忠实地诠释乐曲。他拥有重新定义音乐中蕴含的情感意义的能力。柔和流畅的动作可以缓和紧张、焦虑的音乐,赋予其抒情性。而尖锐、断续的姿态则能在看似平静的旋律中发现隐藏的焦虑,将其彻底颠覆。舞蹈不是对音乐的评论,而是与音乐的对话。
于是诞生了第三件艺术作品:它不再仅仅是乐谱,也不仅仅是音乐的声音,更不仅仅是编舞——而是它们生动相遇的空间,一场就在我们眼前发生的对话。
情感存在于我们之间的空间
这项工作有助于理解艺术的一个悖论:为什么同一场演出会在不同观众心中引发截然不同的状态。为什么一位观众被情感的浪潮席卷,而另一位却几乎无动于衷?
原因并非偶然。我们感知的不仅仅是机械堆砌的孤立元素。我们注意到它们之间的关系和联系:微笑是否与旋律的特征相符,动作是否与节奏的脉搏一致,身体语言是否支持面部所表达的情感。我们不断检验一致性。
然后,观众带着自己的记忆、文化和经验,以及当前的情绪状态和预感,积极地进入这个组合。他的存在不是被动的。他不是一张等待被印上现成情感的白纸。他是参与者。
因此,情感并非仅仅存在于音乐作品内部或舞者的身体中。它诞生于声音、身体姿态和感知者之间的生动相遇。这是一个三方的行为,每一方都同样不可或缺。
心会相信谁?
新的研究并未在长期争论中给出最终答案:音乐、面部还是舞蹈哪个更重要?相反,它有力地表明,并不存在普遍的主导渠道。
对于某一种情感,音乐本身更具说服力——其细微的微调变化、其结构。对于另一种,动作至关重要——动态、能量、身体的节奏。第三种则通过面部的微表情展现——眼睑肌肉几乎察觉不到的收缩或嘴唇的弯曲。而最复杂的情感需要的不是三个渠道的一致,而是它们之间微妙的矛盾,正是这种矛盾创造了深度。
也许正是因此,艺术才能触动我们,尽管我们心存怀疑和防备。它不像传递现成的物品那样将情感从一只手传到另一只手。它不强行灌输感受。相反,艺术邀请我们去识别情感,在其全部复杂性中解读它——然后由我们自己决定允许它进入我们心灵多深。
音乐在奏响。身体回应它的呼唤。脸庞讲述着自己的故事,可能与前两者一致,也可能不同。
心不会选择相信三者中的哪一个。相反,它将声音、动作和目光连接起来——在这种复杂的交织中,它辨认出一种统一的、完整的感受,这感受已经超越了其各部分之和。



