Movella Xsens：动作捕捉技术推动长篇音乐动画制作突破边界

Web3技术是音乐动画制作中获得巨大创作潜力的一种全新途径。音乐制作组合ROHKI决定使用该技术制作属于他们风格的音乐动画。分散式互联网的想法引起了他们的兴趣，这为他们提供了根据自己的条件创作和分发音乐、与新观众建立联系联系以及在更深层次上与粉丝互动的可能性。

ROHKI成立于2021年，自从组合成立以来他们一直在探索数字前沿令人兴奋的新功能。ROHKI使用虚幻引擎来创建他们的音乐动画视频——Animate Music and Lore。以此来为观众们讲述他们虚构音乐世界的背景、历史和各种细节内容。他们的目标是带领观众踏上独特的音乐叙事之旅，探索超越传统音乐视频的长篇故事。

从使用Houdini开始，ROHKI很快发现创造引人入胜且真实的角色是一件非常复杂的事情，而且他们的渲染时间是有限的。因此在这次他们选用了能够实时渲染且拥有强大图形功能和易用性的虚幻引擎来制作他们的音乐视频。

具有强大渲染功能的虚幻引擎5

ROHKI一路学习、磨炼他们的技艺，他们发布的每一个视频都体现出他们的进步。但在前两个项目的开发过程中，他们遇到了一个新手普遍存在的挑战：在工作中学习动画制作的困难。

使用动作捕捉系统提升动画人物创作能力

对于新手来说创建逼真的3D角色是最难解决的一个问题。“由于我们缺乏制作动画的相关经验，因此我们最开始是从下载预制动画开始着手视频制作的，在动画制作中我们需要手动修复动画中的各种细节。但我们都知道这对于创建一部具有开创性的长篇音乐叙事动画是一件非常辛苦的事。”

作为音乐叙事动画的基础，动画中的核心人物是提升粉丝参与度的关键。ROHKI需要找到新的方法来让他们的动画角色生动起来，因为这将是增强他们的故事叙事性和吸引新观众的一个关键要素。

ROHKI使用动捕技术创建的音乐动画视频

为了创造一场真正的身临其境的体验，ROHKI需要一种工具来帮助他们减少对动画创建过程的过分关注，从而专注于动画的重点元素——音乐。在最新发布的音乐视频中《Stars Won’t Align》ROHKI使用了Movella的Xsens动作捕捉技术以提升他们的工作流程并解决手动创建角色定制化动作的难题。ROHKI希望花更少的时间编辑预制动画资产，从而将节省下来的时间投入到创建更丰富的环境中。

Xsens是一种能够记录人体运动数据的动作捕捉系统，可用于创建更逼真的角色模型定制动作。通过将手机与Xsens Live link结合使用，ROHKI可以实时跟踪自己的面部动作。这项技术的应用让他们的角色更加生动，为观众带来了更加真实和身临其境的表演效果。现在他们不再依赖预制的资产动画，而是能够马上开始“扮演”他们的角色。“Xsens让我们可以完全变成我们的角色，这感觉真的很棒！”ROHKI解释道。

Xsens动作捕捉套装

“Xsens动作捕捉套装具有可实时传输的直观性，因此我们很快就掌握了如何创作更有吸引力的音乐动画视频，”他们继续说道。ROHKI以前非常依赖对动画有更多了解的朋友，而现在他可以更加自信的独立创作属于他们自己的音乐视频。“我们只需穿上动捕服，打开软件，校准、记录并将数据实时传输到虚幻引擎中就可以开始动画制作了，这种便捷性真的超乎我们的想象！”

动作捕捉与人工智能相结合

动作捕捉技术的应用让他们在工作的各个方面都有了更深层次的自主权。ROHKI不再依赖他人的知识或模糊的想法表达来制作动画的镜头，现在他们就是音乐家、艺术总监、mocap演员、摄像师、VFX艺术家——Xsens帮助他们实现了创作自由。

在他们探索音乐故事的过程中也用到了人工智能软件——Warp Fusion，这是一种帮助他们探索不同艺术风格的全新工具。“最初，我们利用Midjourney中的新鲜元素来为我们的内容进行润色，”ROHKI说道。“但我们知道有一种方法可以帮助我们在更深的层次上融入人工智能。”

ROHKI使用Warp Fusion将他们的视频风格化。事实证明，拥有能够支持这种风格化转变的动作捕捉工具对他们创建具有独特风格的音乐内容带来了巨大的帮助。他们只需将Movella Xsens采集到的动作数据被传输到虚幻引擎，之后就可以通过Warp Fusion直接运行风格化转换，整个制作过程非常流畅。

Warp Fusion视频风格化转换

ROHKI热衷于使用最前沿的技术创造令人惊叹的艺术作品，除了制作长篇音乐叙事动画外，他们还计划使用Xsens的实时动画制作技术创建现场表演，让观众实时体验他们的音乐和动画作品。Xsens和虚幻引擎的结合让ROHKI有机会创造出超越传统音乐视频的全新艺术形式，ROHKI表示他们将继续在该领域深入探索，以推动音乐动画突破现有界限。