营造逼真的AR直播效果，物理交互是关键

Esther｜编辑

提到AR技术，以前人们最先想到《精灵宝可梦Go》这类AR游戏，实际上近年来，AR在直播、体育娱乐等场景应用越来越广泛。与基于手机的AR应用不同，通常AR内容是实时叠加在现场直播画面中，观众必须通过直播屏幕才能看到，也就是说你不能从多视角查看AR，只能跟随直播摄像头来看。这样做的好处是观看体验更稳定，确保大家都可以看到AR内容。

其中一些比较经典的例子包括：春晚的AR刘德华表演、英雄联盟总决赛开幕式的AR巨龙和K/DA表演、ABC电视台用AR直播总统选举、The Weather Channel在实时渲染的AR背景中预报天气等等。

实际上，上述AR形式与电影中使用的后期特效看起来相似，但最大的不同是AR是实时渲染的，而不是后期处理的。AR需要根据现场的环境信息，实时叠加在物理环境中，因此更适合直播。近年来，随着图形渲染、AR定位等技术发展，AR在直播场景的应用效果也越来越成熟。尤其是前不久，在外网广泛传播的AR黑豹视频，看起来比以往许多AR案例都更加逼真生动，仿佛真的有一只巨型猛兽闯入比赛现场。

这是为了给NFL 2021年赛季的首个周末比赛预热，美国卡罗来纳黑豹橄榄球队展示的一段拍摄于美国银行体育场的AR视频。在视频中，你可以看到一只巨型黑豹从体育场边缘跳到大屏幕上方，撕掉对手的旗帜，然后又跳到球场上。整个视觉体验相当逼真，尤其是AR黑豹的动作、光影变化看起来十分自然。再加上黑豹的吼叫声，仿佛体育场真的闯入了一只猛兽。

这段加入AR效果的视频在Twitter上的点击率高达570万。据体育媒体Sportico预测，AR黑豹表演为球队和合作伙伴带来了价值超6万美元的收益。Twitter视频火了之后，很多来自全球各地的人都开始向其制作公司询问相关技术，还想要将AR应用在自己的活动中。

据了解，该AR特效由现场活动创意公司The Famous Group开发，制作过程大约2个月，包括从策划、开发到彩排。该公司表示这并不是后期效果，而是在Unreal引擎中实时渲染，并叠加在真实环境上的AR效果。也就是说，这段视频是用摄像头实拍的，拍摄者需要实时追踪AR黑豹的位置，才能在屏幕里看到它。

值得注意的是，为了让AR黑豹可以和体育场互动，The Famous预先对体育场进行建模，尽管观众肉眼看不见，但这些建模数据会帮助定位AR的位置。尽管如此，仔细观察会发现AR黑豹其实并没有完全“踩”在大屏幕上，和屏幕顶部还有一定缝隙，它像是悬浮在空中。

不过，在现场展示的AR黑豹不能在手机端查看，而是通过统一的摄像头捕捉的。因此，观众只能在大屏幕上观看2D效果，不能从其他角度查看。有趣的是，为了避免在拍摄视频时大屏幕反光，The Famous在屏幕上叠加了黑色效果，在黑色背景上渲染了黑豹的双眼，烘托主题。

除了AR黑豹外，The Famous也曾用AR来介绍橄榄球队员，以球场为背景，通过大规模AR视觉效果来依次介绍运动员，促进运动员和粉丝们之间的互动。两年前，该公司也曾为巴尔的摩乌鸦队制作AR乌鸦体验。与两年前相比，AR黑豹的最大升级是与环境的互动更加自然。了解英雄联盟开幕式AR表演的人会发现，缺少与环境的互动，以及跟随环境变化的光影效果，AR看起来并不够真实，可以明显看出是特效。为了增强AR的自然、逼真感，近年来Niantic就一直在升级AR遮挡、虚实互动的效果。

未来，逼真的AR不仅可以实现吉祥物表演，还可以打广告，因为并不是真实存在的广告牌，所以不干扰观众看比赛，而且可以实现更多样化的立体视觉效果。甚至，可以将AR广告叠加在空的座椅上。

总之，AR可以实现真实吉祥物无法完成的动作，而且规模可以更大，效果更佳振奋人心。The Famous老板Jon Slusser表示：AR有望成为动画技术的未来，通过虚拟与物理环境的自然融合，让人们难以分清现实和虚拟。此外，AR技术有潜力将娱乐、赞助、宣传、信息、数据等内容叠加在真实场景中，这十分强大，未来将有望作为直播的标准技术。

参考：

https://www.theverge.com/2021/9/15/22672199/carolina-panthers-mixed-augmented-reality-viral-virtual-mascot

（ END）