/声音与交互: UCL的一场视听盛宴

声音与交互: UCL的一场视听盛宴


就在上周末,UCL巴院正式推出2021 The Bartlett 15 Show。此次展览公布了Design for Performance and Interaction MArch的所有优秀作品。

今天,小编就为大家分享一下其中的一个项目——Shifting,它是由Bernardo Varela创作完成的。

项目介绍

Introduction


“声音和视觉运动之间因果关系的破坏会引发自发的和不可抗拒的幻想。因此,我们开始了穿越想象环境的旅程,而这也是一个调用内部投影的动态过程。”



在这个充满不确定性的世界中,不同解释之间的转换不仅是生存的关键,也是一种创造性的行为。Shifting是一系列视听体验,旨在探索人类从模糊和抽象刺激中构想并感知环境的能力。Shifting激发了感知声音和图像之间联系的新方法,因此它在很大程度上依赖于观察者的想象力和呈现现实的能力。

项目开发

Project Development


在这一系列实验中,数字和特定地点的装置通过动态的视觉呈现重新定义了我们在日常生活中所听到的声音,进而增加了日常声音的模糊性。


Bernardo Varela通过声音创造了一个心理形象,当Shifting被赋予一个形象时,我们的大脑就以一种非常陌生的方式将这些结合在一起,并引发认知失调,进而增强我们创造新联想的能力。Bernardo Varela希望通过激发感官互动来增加环境的模糊性

1.Shifting-S

Shifting-S是一个特定地点装置,它会出现在"Shifting to the Forest"活动之中。这是一个感官空间,图像和声音在这里创造了特定的感官效果、出乎意料的音量、节奏和诗意。


“Shifting to the Forest"呈现出了这样一个极致体验:在沼泽地柳树下的一晚中,视频和表演被通过合作的方式带到了现场,并为现场所有观众展现了一场视听盛宴。


2.Shfiting-Displacing

Displacing是Shifting系列中的一个视听实验。此外,它也是一个特定地点的装置。Displacing翻译并融合了东伦敦一个秘密花园的声音和视觉元素



在这个实验中,现场捕捉到的声音发生了变化,同时它们的因果关系也发生了模棱两可的改变。声音的飘渺与视觉中的物理存在结合一起,将观察者带到了不同的地方

Researcher: Bernardo Varela;

Supervisors: Paul Bavister, Felix Faire, Luca Dellatorr;

Hardware: Custom Parabolic Microphones, Custom Binaural Microphones, Surround sound system;

Software: Ableton Live, Touchdesigner, Adobe Premiere;

Thanks to: Helena Lukowiecki, Tati Batalha.

3.Shfiting-High Pass

High Pass的实验想法是:我们如何可以根据环境以及当前和不断变化的优先事项和兴趣,通过不同的方式感知相同的声音。实验记录表明,这取决于我们在特定时刻的注意力集中在何处。根据所处环境,相同的声音组件可能意味着完全不同的东西

在某一个给定时刻,高速公路上的汽车(繁忙的声音)听起来像沙滩上的海浪(平静的声音),或者树叶被自行车碾过的声音听起来像开水。


在High Pass实验中,Bernardo Varela选择UCL附近的东伦敦高速公路上的汽车录音。在对声音进行编辑和过滤后,汽车和海洋的声音之间的相似性变得更加明显;而自行车在树叶上行驶的声音则变得类似于沸水。


在整个编辑过程中,Bernardo Varela使用了高通滤波器消除声音的低频。通过调制高速公路上录制的汽车声音的低频,可以增强繁忙的道路和沙滩海浪之间的声音相似性。



与此同时,他将编辑后的音频在Touchdesigner中进行了分析,进而生成了矩形(道路条纹和波浪粒子)和不同声音频率实时反应的程序动画。而TD中的关键帧动画,也可以通过添加相机运动的形式增强粒子流,且为关键时刻添加了更多的戏剧性和叙事性。


Touchdesigner CHOPto操作员将音频分析数据转换为图像,即:一排像素,颜色值以每秒60帧的速度进行动画处理;声音频率从左到右、从低到高进行分布。TOP反馈与其他效果相结合,创建了实时呈现为运动图像的音频频谱表示。

Researcher: Bernardo Varela;

Supervisors: Paul Bavister, Felix Faire, Luca Dellatorr;

Hardware: Binaural Microphones (Sennheiser Ambeo smart headset), Iphone, Surface Book 2;

Software: Ableton Live, Adobe Audition, Touchdesigner;

Thanks (TD tutorials): Simon Alexander-Adams, Hristo Velev.


4.Shfiting-Hovering
Hovering是一个关于将观众传送到不同感知状态的实验。它最初的设计是用于四声环绕声,这一版本以Ambisonics混音的形式产出。

此外,在东伦敦的Clisso公园录制的单个音频文件被设计者采样,他使用颗粒合成源自视频中的所有声音。

Researcher: Bernardo Varela;

Supervisors: Paul Bavister, Felix Faire, Luca Dellatorr;

Hardware: Binaural Microphone SennheiserAmbeo,  Surround sound system

Software: Ableton Live, Touchdesigner, Adobe Premiere, Adobe Audition

Thanks to: Helena Lukowiecki, Tati Batalha.

5.Shfiting-Seeking

Seeking是一项正在研究的关于感知过渡状态的实验,它也是Bernardo Varela在伦敦大学学院学习过程中的一部分项目。在这个实验中,跟随几何元素寻求进入它们可能属于的平行世界。

Seeking是一个推测性设计实验,其目标在于将VR环境中探索感知过渡状态的概念进行可视化

Researcher: Bernardo Varela;

Supervisors: Paul Bavister, Felix Faire, Luca Dellatorr;

Audio: Friday@Unit15 – The Loose Association of Cinema and Sound.

Shifting的这一系列通过声音和动态视觉激发感知力的实验,为我们带来了一场完美的视听体验。


查看更多项目信息可以点击下方链接,进一步了解此项目。



TIPS:

Design for Performance & Interaction MArch2022Fall申请将于2022年3月31日

想要申请该专业的同学们千万不要错过。

编辑:YAN

图文来源网络,侵权告知即删
原文连接:
http://www.interactivearchitecture.org/lab-projects/shifting


本文来自微信公众号“交互设计小站”(ID:racjiaohu)。大作社经授权转载,该文观点仅代表作者本人,大作社平台仅提供信息存储空间服务。