由于疫情影响,今年不可能举办真实的线下活动。而比利时大型音乐节Tomorrowland的幕后团队在三个月内创建了一个革命性的互动虚拟世界,他们又是如何做到的呢?
来自比利时的音乐节Tomorrowland始于2005年,从不甚起眼发展为可以刺激所有感官的视觉及声音盛宴,并配合有巨大的建筑、史诗般的阵容和超凡脱俗的氛围。这场持续周末两天的活动,仅在2019年就有近50万游客参与。
和其他大型音乐节一样,Tomorrowland 2020被迫取消。COVID-19病毒的流行使聚集如此庞大的人群成为不可能,比利时政府和其他世界各国一样,在3、4月间实施了全国封锁,而Tomorrowland的取消声明是在4月15日发布的。
随后,主创团队立即开始着手雄心勃勃的虚拟音乐节计划,最终吸引了60多位艺术家在6x8x8米的绿幕中拍摄了全新的Set,地点分别是在圣保罗、悉尼、洛杉矶和Boom(比利时小镇、活动举办地)。他们与一家名为DogStudio的创意机构一起工作,还与其他更多团体合作,着手创建一个名为Pāpiliōnem的沉浸式虚拟世界(用户可以点击探索)。它有8个不同的舞台,都是Tomorrowland自己的团队和为超级碗设计虚拟场景的公司等伙伴一起从零开始进行的3D设计。8个舞台上的艺术家包括有David Guetta、Dixon、Charlotte de Witte、NERVO、Stephan Bodzin、Katy Perry、Eric Prydz、NGHTMRE和ANNA等人。
此外还有16场网络研讨会,邀请了will.i.am(美国著名Rapper)、Guy Laliberté(太阳马戏创始人)、Shaquille O’Neill(NBA大鲨鱼)等人参与。
活动的最终效果令人印象非常深刻,构思、制作和执行都是在封锁期间完成的,依靠的是200多人的团队在全球不停的工作。那么他们是怎么做到的呢?
当被问及什么是活动筹备中最困难的部分时,新闻官Debby Wilmsen的回答是:时间。他说:“每个人都需要7x24的工作才能准备好一切,图像渲染非常耗时,而我们有8个舞台、60多位艺术家、16场网络研讨会以及其他一些活动。由于疫情,每个人都得在家里工作,完全无法旅行,所以我们只能设置四个棚来录制艺术家们的作品。”
在安装摄像机之前,工作室的设备进行了技术改造,以便为AR技术做好准备。天花板上也安装了大型红外反射栅格,以便跟踪设备能够精确测量每个摄像头的位置。摄像机和镜头的所有其他参数都被实时传输到服务器上,服务器负责记录数据并渲染呈现出一个低分辨率的虚拟世界供摄像师和导演使用。根据技术设置,投在艺术家身上的光线会根据虚拟舞台的所在位置和播放期间时间的变化而改变。
一家名为stYpe的公司负责将绿幕影像转换为可移动、可缩放的虚拟世界。其中的6台4K摄像机与38台虚拟摄像机组合使用,以便对28万虚拟音乐节观众进行大范围拍摄。这家公司专门从事虚拟现实及增强现实拍摄以及现场直播中的虚拟演播室特效工作,为MTV、欧洲电视台歌赛、奥运会、超级碗等活动提供虚拟场景服务。
stYpe的CEO Stype Cajic解释说:“在奥运会等直播项目中,对速度、虚拟场景优化和摄像机的追踪可靠度有很高的要求。镜头只能拍一次,没有可能再重复一遍,因为一切都是在直播。另一方面,电影制作对高分辨率和虚拟效果的真实感有很高的要求,就像我们在大片中看到的那样。Tomorrowland Around the World在这两方面都有高要求,这就意味着我们需要解决有趣的技术挑战。”
“我们决定使用RedSpy系统,事实证明这是一个正确的选择,因为它可以连续几天正常以双帧速率工作,而且它的拍摄精度也超过了Tomorrowland要求的4K。第二个要点是高分辨率照片的真实感实时渲染,我们为此使用了StypeLand Unreal插件并进行了修改,给天才艺术家们带来容积光照,让整个Set看起来更具真实感。”
超级软件
你可能见过Unreal这个词,来自Unreal Engine(最常见的3D实时创建引擎),在很多游戏中都有过运用。Tomorrowland解释了自己的需求:“每个舞台占地16平方公里,有32000株植物和树木。舞台景观都是按照音乐节场地的元素定制的,核心舞台处于森林环境中,而主舞台则是天然露天剧场。Tomorrowland Around the World中的多边形使用量是现代电脑游戏的10倍,超过了大多数游戏引擎和硬件的极限。”
最后的选择是Synconorm开发的Depence软件,并且经过了开发者的重新编码,以支持真实的镜头感,并能根据每个虚拟舞台的灯光、烟火、特效和激光在DJ身上创建逼真的灯影效果。人群的欢呼声和嘈杂声也被加入进来,Tomorrowland所有的员工都参与了录制。
在所有的Set拍摄完成后,总的镜头容量超过了300TB。Tomorrowland和DogStudio开始将镜头和渲染效果转换成能够在任何浏览器上访问的交互世界,并且能够使用不那么强大的设备。“我们最大的挑战,除了技术方面还在于确保音乐节游客能够体会到,他们是某个超越电脑和互联网连接事件的一部分。”DogStudio的CEO兼创意总监Henry Daubrez解释道,“我可以自豪地说,我们正在为在线音乐体验制订新标准并突破了现有技术的屏障。另一方面,我们还确保了即使是几年前的老设备也能正常使用它。”