阿尔托大学的研究人员正在寻找更好的方法来在虚拟现实中指导舞蹈编排。他们开发的新型 WAVE 技术将于 5 月在人机交互研究的主要场所 CHI 会议上展示。
以前的技术很大程度上依赖于预先排练和简化。
“在虚拟现实中，很难想象和传达舞者应该如何移动。人体是如此的多维，很难实时获取丰富的数据，” Perttu Hämäläinen教授说。
研究人员首先尝试了以前舞蹈游戏中常见的可视化技术。但在经过几个原型和阶段之后，他们决定尝试使用体育赛事中常见的观众波浪来引导舞蹈。
“模特舞者波浪式的动作让你能够提前看到接下来的动作。你不必事先排练动作，”博士研究员马库斯·拉塔拉说。
一般来说，由于人类感知运动控制的延迟，人们无法实时跟上新的舞蹈编排。而研究人员开发的 WAVE 技术则基于对未来动作(如转身)的预测。
“没有人知道如何引导像现代舞这样连续流畅的动作。在我们实施的编舞中，制造波澜是一种交流，是一种微型规范，模特舞者在瞬间延迟后遵循相同的编舞，”哈马莱宁说。
从太极拳到夸张动作
共有 36 人参加了一分钟的舞蹈测试，将新的 WAVE 可视化与传统的虚拟版本进行了比较，后者只有一个模特舞者可以跟随。两种技术之间的差异很明显。
“这种实现方式至少适用于慢节奏的舞蹈风格。舞者可以直接跳进去开始跳舞，而不必事先学习任何东西。然而，在更快的动作中，视觉效果可能会变得混乱，需要进一步的研究和开发，以适应和测试更多舞蹈风格的方法，”Hämäläinen 说。
除了虚拟舞蹈游戏外，新技术还可能适用于音乐视频、卡拉 OK 和太极拳。
“如果用户可以决定如何以适合自己的方式定位模特舞者，那么这对用户来说将是最佳选择。如果这个想法进一步发展，几位舞者可以在社交虚拟现实中互相发送舞步。这可能会成为一种全新的共舞方式，”拉塔拉说。
“目前主流的 VR 设备仅追踪头戴式耳机和手持式控制器的运动。另一方面，机器学习数据有时可用于推断腿部如何移动，”Hämäläinen 说道。
“但在舞蹈中，推理更加困难，因为动作比走路等动作更奇怪，”拉塔拉补充道。
另一方面，如果你在现实舞蹈空间中有一面镜子，你可以使用机器视觉来跟踪你的脚步运动。可以使用虚拟镜子来修改舞者的视野。
“舞者的虚拟表演可以通过夸张来改善，例如通过增加灵活性、跳跃高度或臀部运动。这可以让他们觉得自己比实际更熟练，研究表明这对身体活动动机有积极影响，”哈马莱宁说。
标签：