芬兰阿尔托大学开发WAVE技术,以在VR中指导舞蹈编排

近日,芬兰阿尔托大学的研究人员开发了一种名为 WAVE 的突破性虚拟现实技术,以增强舞蹈编排的学习。该技术使用模型舞者的波浪状可视化,使学习者能够在没有事先排练的情况下预测和执行舞蹈动作。
这种方法有望在 VR 中更有效地教授复杂、流畅的舞蹈动作,如现代舞。该研究强调了舞蹈教学之外的潜在应用,包括虚拟舞蹈游戏和互动音乐视频。
图片
以前的技术在很大程度上依赖于预先排练和简化。团队表示:“在虚拟现实中,你很难想象和交流舞者应该如何移动。人体是多维的,很难实时获取丰富的数据。”
研究人员首先尝试了以前舞蹈游戏中熟悉的可视化技术。但经过几次原型和舞台之后,他们决定尝试用体育赛事中熟悉的“人浪”(人浪是一种球迷在体育赛事中通过有次序地举手、站起再坐下,从而形成波浪状的运动)来指导舞蹈。
研究员 Markus Laattala 表示:“模特舞者的波浪状动作可以让你提前看到接下来会有什么动作,而且你不必事先排练这个动作。”
一般来说,由于人类感知运动控制的延迟,人们无法实时跟随新的编舞动作。另一方面,研究人员开发的 WAVE 技术是基于对未来运动的预期。
团队表示:“没有人想出如何引导像现代舞这样连续、流畅的动作。在我们实施的编舞中,制造人浪就是交流,这是一种微观的经典,在这种规范中,模特舞者遵循相同的编舞,只有一秒的延迟。”
共有 36 人参加了一分钟的舞蹈测试,将新的 WAVE 可视化与传统的虚拟版本进行了比较,后者只有一名模特舞者可以跟随。两种技术之间的差异是显而易见的。
这种方法至少适用于慢节奏的舞蹈风格。舞者可以跳进去开始跳舞,不需要事先学习任何动作。但在较快的动作中,视觉效果可能会令人混乱,需要进一步的研究和开发,以适应和测试更多舞蹈风格的方法,
除了虚拟舞蹈游戏外,这项新技术还可能适用于音乐视频、卡拉 OK 和太极拳。
研究人员指出:“如果用户能够决定如何以适合他们的方式放置模特舞者,那将是最佳选择。如果这个想法更进一步,几个舞者可以在社交虚拟现实中互相发送动作,它可能会成为一种全新的跳舞方式。目前主流的 VR 设备只能跟踪头显和手柄的运动。另一方面,机器学习数据有时可以用来推断腿部的运动方式,但在舞蹈中,推理更加困难,因为动作比走路更奇怪。”
另一方面,如果你在真实的舞蹈空间里有一面镜子,你可以用机器视觉来跟踪你的脚部运动。舞者的视角可以使用虚拟镜子进行修改。
团队表示:“舞者的虚拟表演可以通过增加灵活性,跳跃高度或臀部运动来提升优化。这可以让他们觉得自己比实际情况更熟练,而研究表明这对体育活动的动机有积极的影响。”