我们如何在残疾音乐家和VR的帮助下设计乐器


大多数新的数字技术在设计时都会考虑到一个精通的用户 。最初的台式计算机需要具备很好的运动技能,才能使用鼠标浏览软件菜单,而移动电话则需要用户按下按钮,滑动屏幕等 。要使用这样的技术,一个人需要相当灵巧 。
在“无障碍表演”研究小组中,我们在设计数字音乐界面时考虑了残疾音乐家 。这项工作从一项新技术的开始就吸引了残疾表演者,并研究了他们具有的特定能力 。这样,在考虑到技术的灵活性,需求和创造兴趣的情况下,技术会与它们一起发展 。
当前的VR技术是为身体健全的人设计的,但更重要的是,它通常仅允许进行被动交互-收听音乐表演,例如Elton John的360音乐会,或“坐骑”过山车 。我们对残疾人音乐家如何以积极有效的方式使用VR技术更感兴趣 。
合作
我们的研究团队由不同的小组组成,包括电子工程师,计算机科学家,声音艺术研究人员,身临其境的内容设计师,独奏合奏团和一个本地团体,该团体可以帮助残疾音乐家独立表演和创作自己的音乐 。我们与这些音乐家一起,与软件开发商合作,后者正在设计一种名为“Infinite Instrument”的VR乐器,该乐器可以在名为HTC VIVE的360°VR耳机上运行 。
该乐器在开发时就考虑到了乐于助人的音乐家,因此我们在设计该乐器时考虑了不同类型的活动性 。这导致我们脑瘫的一位音乐家演奏了一种新的VR乐器,该乐器专为考虑到她富有表现力的上半身动作而设计 。不需要她在她的手臂或手指中使用精细的运动精度,而她没有 。
VR耳机一定与您所看到的有关 。但是,我们发现,来自手持控制器的触觉反馈(用户可以通过其访问菜单并按命令来访问内容)使该特定音乐家可以通过感觉和听到而不是通过头戴式耳机来观看乐器 。。不必依赖耳机也意味着她可以在演出期间与其他音乐家保持视觉接触 。
【我们如何在残疾音乐家和VR的帮助下设计乐器】我们的协作VR设计的另一个示例是与盲人表演者合作 。这位音乐家的关键是他在单簧管上的演奏技巧 。这个想法是建立在他的专业知识的基础上,并使用VR技术来适应和增强他的音乐演奏技巧 。
VR体验如此集中在视觉体验上,以至于他们常常忽略了声音的内在沉浸性,但是在我们周围,都是适当的360°体验 。显然,视觉耳机与该盲人音乐家无关或无济于事 。我们需要集中精力研究如何将空间的其他沉浸式品质用于音乐表演 。
我们的团队位于皇后区的Sonic LAB,这是一个身临其境且完全可定制的3D声音空间(通常称为耳朵的iMAX),我们决定使VIVE技术适应现有环境 。
虚拟现实技术为残疾人打开了音乐的新体验和可能性 。
对于我们的澄清专家,我们专注于VIVE控制器,因为它们比视觉更具触觉 。他们还可以跟踪空间中的物理位置,这意味着,通过将VIVE控制器绑在他的乐器上,clarinettist能够在3-D Sonic LAB中定位声音 。
包容性思维和设计
这些定制的VR乐器设计在2018年11月的一场演唱会中亮相,残疾人音乐家与硬雨独奏乐团的音乐家一起表演 。
为了增强表演空间的身临其境的体验,观众被安排在一个紧紧围绕着音乐家的圆圈中 。
到2020年,全球残疾人设备市场估计将增长到超过80亿美元,并且在过去十年中,英国的残疾人设备的销售增长了93%以上 。如果残疾人的观点是他们设计的一部分,那么包括VR在内的所有技术都可以包括在内 。
我们的方法揭示了如何开发新技术,使残疾人音乐家积极参与音乐创作,并展示了对残疾人音乐家生活质量的承诺 。我们将继续设计可用于VR的工具,但现在我们将专注于使用价格更实惠的系统,以期创建残障和身体健全的音乐家的虚拟现实合奏 。

    推荐阅读