密歇根大学钢琴学生利用 VR 对抗怯场

当您走上舞台表演钢琴独奏时,您会听到鞋子在舞台地板上发出的回声。你遮住眼睛,避开明亮的灯光,坐在三角钢琴前。

来源:密歇根大学

当您走上舞台表演钢琴独奏时,您会听到鞋子在舞台地板上发出的回声。你遮住眼睛,避开明亮的灯光,坐在三角钢琴前。

当观众的喧闹声归于平静时,你的神经会变得紧张起来。你的开场音符横扫整个场地,从手指下的琴键传到房子的后面。

但这一切都是在舒适的教室里发生的,而不是在有现场观众的真实舞台上。

密歇根大学的 Piano Lab Pro 使用虚拟现实来帮助学生减少音乐表演焦虑 (MPA),因为他们创造并重复现场表演体验,获得对空间、大厅音响效果以及观众分心的挑战的舒适感。

“我很高兴也很兴奋,因为美国没有其他大学拥有这种技术,尤其是使用个性化护目镜。我们是美国第一所将其纳入钢琴课程的大学,”密歇根大学音乐、戏剧和舞蹈学院钢琴教育学讲师、大学钢琴班主任兼钢琴教育学实验室项目协调员 Aya Higuchi Hagelthorn 说道。 “我们确实可以改变学生的生活。”

扩展现实

Hagelthorn 见证了 MPA 对高中和大学年龄段学生在专业层面的广泛影响;有些人在考试中途崩溃,在考试中流泪,或者表现出焦虑的行为,比如在考试前反复洗手。

“你可以看出这是不健康的。因此,如果有一个很小的方法,但也是一种很酷、有趣的方法,可以帮助他们摆脱这种感觉,并以安全的方式理解这种感觉,我认为那就太好了,”她说。

考虑到这一目标,Hagelthorn 向密歇根大学学术创新中心申请并获得了一笔资助,用于探索扩展现实在音乐教育中的潜力,这是该中心使用 Apple Vision Pro 的第一个项目。

Hagelthorn 开始与该中心的 XR 团队在 Piano Lab Pro 上合作,利用 VR 复制密歇根大学布里顿演奏厅(大多数钢琴评审团和学生表演的举办地)和希尔礼堂(具有独特声学考虑的历史悠久的音乐场所)的设置。

感官和情感

视觉组件只是拼图的一小部分。 SMTD 研究生主任、表演艺术技术副教授、该项目的第二位研究员 Anıl Çamcı 表示,尽可能多的感官参与才能让虚拟体验变得可信和身临其境。

“当你走上希尔礼堂的舞台时,这个空间的宏伟令人惊叹,”他说。 “观众是令人畏惧的,但这种体验中最关键的方面之一是,礼堂突然在声音上扩展了你的乐器。礼堂本身在某种程度上成为了乐器。”

Çamcı 被 Hagelthorn 称为“空间音频大师”,他和他的研究生使用不同的工具来捕捉两个空间的声学特性。例如,他们会在礼堂的不同区域弹出一个气球,这会“点亮”音响效果,并允许学生通过算法将这些声音特性应用于钢琴的声音。

他们还合作制作了现实的观众干扰——咳嗽、大笑、手机铃声,甚至只是满屋子人呼吸的杂音。

“在这次体验中捕捉到这一点也很重要,因为如果没有它,你就会错过登上舞台时所经历的全部现实,”Çamcı 说。

战斗、逃跑或玩耍

为了了解此类工具的价值,并衡量虚拟环境如何影响表演音乐家,Hagelthorn 与社会研究所的生物社会方法合作组织合作。

ISR 团体动力学研究中心主任 Rich Gonzalez 和他的团队设计了 Piano Lab Pro 项目的试点阶段,使用心理生理传感器和调查来开发一个协议,用于识别焦虑何时出现以及它如何影响表演者。传感器被策略性地放置在表演者的身体上,学生会对表演视频进行注释,以讨论他们演奏时的感受。

“传感器确实在接收并证实音乐家所说的话。当他们说感到紧张时,信号确实激增,因此他们的生理学证实了他们的故事,”生物社会方法合作组织的研究过程总监艾丽西亚·卡迈克尔说。

“激活反应最干净的信号是汗水,我们从脚上测量。当音乐家紧张时,我们可以检测到轻微的波动,表明战斗或逃跑反应已被激活。”

利用心理生理学的见解,教师有一个新的机会来定制 Piano Lab Pro 体验。它还可以帮助学生深入了解自己的 MPA。

“能够获取这些生理信息可以帮助人们更加了解自己体内正在发生的事情,”ISR 研究员兼建筑学博士 Natalie Leonard 说道。陶布曼建筑与城市规划学院的候选人。

放大

该团队已获得艺术综合资助计划的资助,该计划为增加艺术接触、活动和研究的创新项目和计划提供资金,以便在今年秋天继续他们的工作,哈格尔索恩打算将新技术纳入她的一些钢琴课程中。

AIGP 资金将使团队能够利用生理传感器、VR 耳机以及表演后的视频录制、评论和注释,再增加六名学生参与研究。

此外,所有钢琴学生将有机会参加 MPA 自我评估,这有助于为每个学生制定基准,并获得建议的应对机制,以帮助他们完成当前的 MPA 水平。

一部分钢琴学生将能够在期中和期末考试之前使用 Piano Lab Pro,在每次考试后进行后续调查,并将他们的结果和演奏视频贡献给研究团队。

Gonzalez 相信,密歇根大学各校园单位之间独特的合作将成为 Piano Lab Pro 未来成功的关键因素。 “这不仅仅是添加一个工具。它真正考虑的是教育系统以及它如何适应,”他说。