如何打造一场美轮美奂的交互式音乐会?新西兰音乐节给出了一些答案

8787003-28 20:45

想象一下这样一个场景:你最喜欢的歌手正在表演,绚烂的灯光照耀在舞台上,随节奏变幻。

你仿佛就在舞台上,甚至可以和歌手互动。这就是新西兰Pharos音乐节为人们带来的全新体验。

去年11月在奥克兰举行的Pharos音乐节引起了业内的轰动,这场为期三天的音乐盛事将高科技和音乐高度融合,展现了未来科技之光。

这个沉浸式项目由纽约工作室2n Design与维塔数码(Weta Digital)合作构建,这场视觉盛宴给观众所带来的沉浸感是令人惊叹的。同时凭借This Is America》获得第61届格莱美年度制作、年度歌曲两项通类大奖的Childish Gambino来到了现场为大家演唱。

Weta Digital特别项目主管Kevin Romond表示:“为了配合Gambino的表演并响应观众的情绪,交互式叙事体验是一个非常好的方式,我们在舞台圆顶安装了摄像机,全面捕捉表演,为观众带来非常细腻的呈现。”

如何构建沉浸式舞台装置?

演唱会布置在一个160英尺高的圆顶舞台,圆顶上安装了五台机器,各自负责相应的区域。2n Design和维塔数码搭载了英伟达Quadro P6000显卡将五台机器布置成一个无缝的圆形渲染装置,可以完美捕捉细节。

为了确保为所有视点和角度带来最佳的视觉效果,两家公司开发VR技术,而这允许他们在设置系统之前检查并迭代设计。

团队以360度视角投影,而Gambino则在中心舞台演出。当抬起头时,粉丝可以看到特效朝音乐方向移动,而五彩缤纷的灯光照亮了整个舞台。

Pharos音乐节创意总监Alejandro Crawford回答道:“VR帮助我们以360度视角设计舞台,比如我们可以判断舞台上的一棵树是否过于靠近摄影机,或者一个是否需要以不同的方式移动。VR使得我们能够以我们想要的方式设计镜头和呈现舞台。”

Weta Digital特别项目主管Kevin Romond表示:“圆顶的大小意味着屏幕上需要高像素的渲染。基于虚幻引擎,团队利用与图像质量相关的工具,渲染高清的画面效果。”

实时同步

当视觉效果完成构建后,团队必须同步画面和表演,并确保整个系统可以同时地渲染。团队通过虚幻引擎开发了系统框架,其中图像能够通过英伟达图形引擎的nDisplay技术实时渲染图像。

“使用nDisplay分发实时渲染,并保持该舞台装置所需的分辨率和帧速率,这对于舞台的成功呈现至关重要,”2n Design艺术总监Jeremy Thompson说。

解释说:“我们希望实现一个世界向另一个世界的无缝过渡,而不是淡入淡出。等待加载不是一种选择。我们的策略是将所有内容加载到内存中,而Quadro GPU提供了足够的视频内存,可以做到这一点。”

然后,团队构建了一个自定义引擎并用来接收Unreal引擎的内容,同时实时拼接各个视频源,最终以超过5K的分辨率生成了令人惊叹的360度投影效果。

团队同时设计了音频参数并将其映射至系统,因此视觉效果可以根据 Gambino的表演进行响应。然后,用户就可以欣赏到一场栩栩如生的音乐盛会,变幻的图形投影至圆顶,并且能够实时地响应歌手表演。

虚幻引擎总经理Marc Petit指出:“实时渲染技术正在改变内容的创造方式。Epic和英伟达正在开创最新的技术,帮助艺术工作者能够处理大型项目并构建非凡的视觉环境。借助Unreal引擎中的渲染系统和Quadro GPU的强大功能,设计人员可以创建前所未有的沉浸式交互式体验。”

值得一提的是,在上月举行的第17届年度VES大奖中,2n Design和Weta凭借这个项目获得了Special Venue Project类别的杰出视觉效果奖(Outstanding Visual Effects )。

在未来,随着用户需求的增高,交互式体验将是最热趋势。

【资讯编译自:digitalmediaworld

87870编译文章


电科技(www.diankeji.com)是一家专注于全球TMT行业的领先资讯媒体。

作为今日头条青云计划、百家号百+计划获得者,2019百度数码年度作者、百家号科技领域最具人气作者、2019搜狗科技文化作者、2021百家号季度影响力创作者,曾荣获2013搜狐最佳行业媒体人、2015中国新媒体创业大赛北京赛季军、 2015年度光芒体验大奖、2015中国新媒体创业大赛总决赛季军、2018百度动态年度实力红人等诸多大奖。

投稿、商务合作请联络微信公众号

声明:本站原创文章文字版权归电科技所有,转载务必注明作者和出处;本站转载文章仅仅代表原作者观点,不代表电科技立场,图文版权归原作者所有。如有侵权,请联系我们删除。

Tags:

猜你喜欢

//59087780b049bbb54ef4ba547ea51910