阿尔托大学的研究人员一直在寻找在虚拟现实中指导舞蹈编排的更好方法。他们开发的新WAVE技术将在5月份的人机交互研究CHI会议上展示。
以前的技术很大程度上依赖于预先排练和简化。
“在虚拟现实中，很难想象和传达舞者应该如何移动。人体是多维的，很难实时获取丰富的数据，”Perttu教授Hämäläinen说。
研究人员首先尝试了以前的舞蹈游戏中熟悉的可视化技术。但经过几个原型和阶段后，他们决定尝试观众挥手，这在体育赛事中很常见，来引导舞蹈。
“模特舞者的波浪状动作可以让你提前看到接下来的动作。而且你不需要事先排练这个动作，”博士研究员马库斯·拉塔拉说。
一般来说，由于人类感知运动控制的延迟，人们无法实时地跟随新的舞蹈动作。另一方面，研究人员开发的WAVE技术是基于对未来运动的预测，比如转弯。
“没有人知道如何引导像现代舞这样连续流畅的动作。在我们实施的舞蹈设计中，制造波浪是一种交流，一种微型经典，模特舞者跟随同样的舞蹈设计，只是有一秒的延迟，”Hämäläinen说。
从太极到夸张的动作
总共有36人参加了一分钟的舞蹈测试，将新的WAVE可视化与传统的虚拟版本进行比较，后者只有一个模特舞者可以跟随。两种技术之间的差异是显而易见的。
“这种实现至少适用于慢节奏的舞蹈风格。舞者可以跳进去开始跳舞，而不需要事先学习任何东西。然而，在更快的动作中，视觉效果可能会令人困惑，需要进一步的研究和开发来适应和测试更多舞蹈风格的方法，”Hämäläinen说。
除了虚拟舞蹈游戏，这项新技术还可能适用于音乐视频、卡拉ok和太极。
“对于用户来说，如果他们能决定如何以适合自己的方式放置模特舞者，那将是最理想的。”如果这个想法进一步发展，几个舞者可以在社交虚拟现实中相互发送动作。这可能会成为一种全新的舞蹈方式，”拉塔拉说。
“目前主流的VR设备只跟踪头显和手持控制器的运动。另一方面，机器学习数据有时可以用来推断腿是如何运动的，”Hämäläinen说。
“但在舞蹈中，推理更加困难，因为动作比走路更陌生，”Laattala补充道。
另一方面，如果你在真实的舞蹈空间里有一面镜子，你就可以用机器视觉来跟随你的脚的运动。舞者的视角可以通过虚拟镜子进行修改。
“舞者的虚拟表演可以通过夸张来提高，例如，通过增加灵活性，跳跃高度或臀部运动。这可以让他们觉得自己比实际情况更熟练，研究表明这对体育活动的动机有积极的影响，”Hämäläinen说。
这款虚拟舞蹈游戏是使用magic基础设施的动作捕捉套件开发的，模特舞者穿着带有传感器的服装。这些是用来记录舞蹈动画的。
WAVE舞蹈游戏可以在GitHub上为meta Quest 2和3 VR设备下载。
更多信息:Hämäläinen, P.等人，VR舞蹈的预期运动可视化，ACM SIGCHI计算系统人为因素年会上(2024)DOI: 10.1145/3613904.3642145
GitHub: github.com/CarouselDancing/WAVE
阿尔托大学提供 引用:研究人员开发了一种在虚拟现实中指导舞蹈的新方法(2024年4月29日 作品受版权保护。除为私人学习或研究目的而进行的任何公平交易外，未经书面许可，不得转载任何部分。的有限公司 内容仅供参考之用。
