What Is Sonification? Toward a Philosophy of Sonification

想象一下你拥有一种超能力：能够听到数据。不仅仅是电子表格上的数字，而是数据背后隐藏的故事。这就是音响化（sonification）的世界——在这个领域，科学家、艺术家和设计师将信息转化为声音。你可以把它想象成翻译一种外语；不是把一部法语小说翻译成英文文本，而是将一张天气图或一张股票走势图转化为一段旋律或一种节奏。但这里有一个棘手的问题：如果你把数据变成一首歌，它是科学吗？它是艺术吗？还是某种完全不同的东西？多年来，人们一直在争论音响化究竟是“带有节奏的科学”，还是“带有目的的音乐”，并常常陷入定义的循环之中。为了解决这个问题，我们需要关注两个宏大的概念。首先，想象一个食谱：无论你是为了生日庆典还是为了科学竞赛去烤蛋糕，食谱本身（混合原料的规则）都是一样的。其次，想象一颗种子：种子拥有固定的遗传密码，但它会长成不同的形状，这取决于它遇到的土壤和阳光。本文利用这些概念提出了一个概念框架，用以厘清音响化究竟是什么，并指出它既可以是一种严谨的技术工具，也可以是一种灵活的创意实践，而不会失去其核心身份。

---

数据的声音：音响化究竟是什么？

所以，你得到了一堆数据。也许是恒星的温度、机器人的运动，或者是病人的心跳。你想去“听”它。你构建了一个系统，将这些数字转化为声音。但随后，一个问题浮现了：“这是音乐吗？”如果声音很好听，它是艺术吗？如果声音帮助科学家发现了错误，它是科学吗？

这篇发表在第31届国际听觉显示会议（International Conference on Auditory Display）上的论文，正是在应对这种困惑。作者鲁本·加西亚-贝尼托（Rubén García-Benito）认为，我们一直问错了问题。我们试图将音响化塞进贴有“音乐”标签的盒子或贴有“科学”标签的盒子中，但它并不属于其中任何一个。相反，他建议音响化是一种跨范畴实践（transcategorical practice）。这是一个高级的说法，意指它是一种可以穿梭于任何地方的技术工具——无论是音乐厅、实验室还是教室——而无需改变其核心身份。

为了解释这一点，论文使用了两个哲学工具，我们可以将其视为蓝图（Blueprint）和生长图表（Growth Chart）。

蓝图：不变的规则

首先，让我们看看“蓝图”。论文使用了被称为**唯物主义认识论（Materialist Gnoseology）**的哲学（可以将其理解为研究我们如何通过物理行动构建知识的学科）。作者将音响化分解为三个层面：

1. 物理实体 (M1)： 实际的电线、扬声器和光传感器。
2. 人类体验 (M2)： 你的感受、你听到的声音，以及声音是悦耳还是刺耳。
3. 规则 (M3)： 隐形的、数学逻辑层面的规则，例如：“如果数据上升，音高也随之上升。”

论文认为，音响化的身份主要存在于规则 (M3) 中。它是那个食谱。无论你使用这个食谱是为了帮助盲人穿过房间、分析一个星系，还是创作一部交响乐，连接数据与声音的规则始终如一。

这里有一个重大发现：音响化的定义取决于其规则，而非其受众。
论文指出，音响化并不因为它听起来好听或在音乐会上演奏就变成“音乐”，也不会在实验室中使用时失去其身份。作者提出，如果你为了让声音变得“更好听”而改变了规则，却忽略了数据，你就有可能**置换（displacing）**这种实践的技术身份。换句话说，如果音乐偏好凌驾于“数据到声音”的逻辑之上，那么即使声音依然存在，这种实践可能也不再具备音响化的功能。但如果你保持严格的“数据到声音”规则，即使观众将其评价为一件美丽的艺术品，它仍然是音响化。

生长图表：它是如何改变形状的

接下来，论文使用了来自哲学家吉尔伯特·西蒙栋（Gilbert Simondon）的第二个工具，类似于一个生长图表。这有助于解释为什么音响化在不同环境下看起来如此迥异，却依然保持完整。

想象一颗种子。种子拥有特定的遗传密码（即 M3 规则）。但当你把它种在沙漠里，它会以一种方式生长；当你把它种在热带雨林里，它会以另一种方式生长。种子仍然是那颗种子，但它的形状会根据环境而改变。

论文认为，音响化是一个亚稳态系统（metastable system）。这意味着它不是一个完成的、僵化的物体。它是一个充满潜力的系统，能够适应周围的环境。

• 在科学实验室中，“土壤”是严格的测试与准确性。音响化会生长得精确且清晰。
• 在艺术画廊中，“土壤”是情感与表达。音响化会生长得具有参与感且富有感染力。
• 在教室中，“土壤”是学习。音响化会生长得具有教育意义。

论文认为，这种适应性并非弱点，而是一种优势。 “种子”（技术规则）保持不变，但“植物”（最终的声音体验）会变化以适应情境。这解释了为什么同一种音响化技术既可以用于严肃的医疗诊断，也可以用于有趣的电子游戏，而技术本身并不会因此失去其身份。

为什么这很重要

为什么一个好奇的青少年应该关心这个？因为这理清了经常阻碍人们认真对待音响化的那种困惑。

• 对于科学家： 这意味着你不需要为你所制作的“数据之声”具有音乐性而道歉。只要规则是严谨的，它就是有效的科学。
• 对于艺术家： 这意味着你不需要为了被严肃对待而假装你的艺术“仅仅是数据”。只要“数据到声音”的逻辑仍然是驱动力，你就可以利用音响化的规则来创作艺术，而不必丢失技术完整性。
• 对于每个人： 它帮助我们理解，仅仅因为两件事物使用了相同的媒介（声音），并不代表它们是同一种东西。锤子无论你是用它盖房子，还是用它敲击节奏，它仍然是一把锤子。工具是相同的；用途是不同的。

论文并未声称解决了关于声音与数据的所有谜团。它没有提供一种制造更好音响化的全新公式。相反，它提供了一种看待它们的新方式。它建议我们不要再问“这是音乐还是科学？”，而是开始问“规则是什么，以及这些规则是如何被使用的？”

通过将不变的规则（技术身份）与变化的体验（艺术或科学语境）区分开来，论文为我们提供了一张航行于将数据转化为声音的混乱而令人兴奋的世界中的地图。它表明，音响化是一种独特的、强大的实践，它可以架起冰冷的科学事实与温暖的情感世界之间的桥梁，同时保持其自身独特的身份完整。