2020年12月3日,中国移动咪咕公司,携手国内领先的虚拟演出和赛事服务商银河威尔科技(GVR),打造了全MR虚拟舞台表演。这场原本每年举办在南京的原创音乐盛典“来电之夜”,今年采用了全线上方式制作和推广,据了解一方面是受到疫情的影响,观众到场受到限制;另一方面更是来自于国内5G用户快速发展的实际需求。目前中国移动已经有1.3亿5G套餐用户,而如何提供5G时代优质的差异化内容,正在成为未来竞争用户的关键点。
回溯整个2020年,疫情的爆发和虚拟技术的特性,让因为隔离而待在家里的消费者正以前所未有的速度接受虚拟的沉浸式体验,这也为加速虚拟现实的普及提供了一个独特的机会:
2020年4月,一场由休斯顿说唱歌手特拉维斯·斯科特(Travis Scott)在《堡垒之夜(Fortnite)》虚拟世界里举办的音乐会引爆了全网。据路透社报道,这场音乐会吸引了2770万名观众,观看次数超过4500万次,创下了《堡垒之夜》的单场出席人数纪录。以虚拟化身出现的观众可以随着充满视觉效果的表演摇摆起舞,并为斯科特的说唱欢声呼叫。
2020年11月,腾讯音乐宣布已与VR演出服务商Wave达成战略合作协议,并将对其进行股权形式投资。根据合作协议,双方将共同探索VR演唱会蓝海市场,并共同开发高质量的沉浸式演唱会内容,提供面向全球的优质音乐内容和创新的交互式虚拟音乐娱乐体验。
由此可见,虚拟技术对于娱乐行业的价值正在逐步凸显,沉浸感、交互性,这些旨在打开未来娱乐体验的新技术究竟会给用户带来怎样的革命性体验?让我们一探究竟。
40天搭建“来电之夜”虚拟演唱会
制作团队银河威尔科技(GVR)产品总监孟超表示:“本场‘来电之夜’虚拟演唱会共有11组艺人,制作周期不到40天,这其中包括虚拟舞台的设计,艺人的拍摄和动作设计,场景融合和特效制作等。”
在不到两个月时间里完成一场虚拟演唱会的搭建工作,这样艰巨的工程殊非易事。为更好呈现本次虚拟演唱会,银河威尔科技(GVR)从四个方面对其进行技术优化:
1、场景虚实融合
这次的虚拟演唱会场景搭建,银河威尔科技(GVR)采用了虚幻引擎UE4虚拟制片技术。将真人影像合成到全虚拟场景中,并实现切换,就像是在虚拟场景中重现了这场音乐会,再通过虚拟摄影机重新拍摄成影片。
2、渲染技术对接
虚拟演唱会的场景通过三维软件进行设计和搭建,但是传统三维软件渲染时间过长,无法按时完成场景渲染任务,这就需要和虚幻引擎UE4进行对接,面临模型优化、材质重建、灯光、动画、特效等一系列修改。
3、搭建数据缓冲池
在传统MR场景拍摄过程中,现实中的摄影机和虚幻引擎中的虚拟摄影机以及实拍画面的匹配和同步一直是难题,本次虚拟演唱会面临着大范围的摄影机追踪匹配和同步的问题,银河威尔科技(GVR)搭建了数据缓冲池,让摄影机的运动数据和实拍画面缓冲匹配,达到完美同步。
4、嵌入MR特效
为了达到超越现场的体验,银河威尔科技(GVR)在场景中设计了一些超现实的内容,比如围绕在演员周围的MR蝴蝶、巨型的烟花、传送门等特效。
在纯虚拟环境中设计和搭建特效,并在虚幻引擎的secquence中进行音乐卡点,通过拾取音乐中的波形来进行扰动匹配,让效果能随着音乐的变化而起伏摆动。此外,每一处灯光变化,背景屏幕变化,每一处烟花、烟雾、MR蝴蝶的特效触发,也都需要大量优化和无数次的调试。
虚拟演唱会技术风头正劲,当下环境加速了人们从现实世界向虚拟世界的迁徙,虚拟演唱会带来的不仅是现场的气氛,更是超越现场的惊奇。孟超表示:“下一步,银河威尔科技(GVR)将结合更多的创造力元素去设计和实现天马行空一般的虚拟演唱会,让虚拟演唱会成为一种新的音乐表现形式。”
XR技术赋能娱乐行业
本次虚拟演出全程采用了XR技术。XR即扩展现实,是指通过计算机技术和可穿戴设备,进而产生的一个真实与虚拟组合、可人机交互的环境,是AR、VR、MR等多种形式的统称。三者视觉交互技术融合,实现虚拟世界与现实世界之间无缝转换的“沉浸感”体验,并且所有XR内容都可以同步通过手机、电视和VR头盔多终端进行实时体验,并不受到头盔硬件的限制。
2016年,一个由专业电影人和工程师构成的团队决心专注使用XR技术提供革命性娱乐体验。其核心专利包括三维交互式直播、虚拟社交、XR特效包装等,并一直专注于赛事,演出和大型活动三大场景,这家公司正是银河威尔科技(GVR)。
2019年4月,由该公司推出的GVR“第二现场”于CBA总决赛首次亮相,曾完成过包括华为mate30产品发布会、p40产品发布会、英雄联盟“德玛西亚杯”总决赛、银河未来音乐现场、世界VR大会等一系列国内演出、赛事和大型活动。
从技术本身来说,虚拟技术借助三维模型制作和实时渲染,可以提供超现实的体验;与此同时虚拟演出同时也免去了排队、长途跋涉的烦恼,可以更加无障碍、自由地近距离观看偶像的表演。当然,虚拟演出依然无法取代真实的线下表演,或许科技永远无法复制现场音乐盛会带来的全部感官体验,但无可置疑的是,VR技术正在改变我们体验事物的方式,他们正在提供越来越多的超越现场的体验。
2020年是5G商用元年,XR作为下一代移动智能平台以及5G赋能下重要的应用场景,深入智能制造、教育、游戏、体育竞技、军事等领域,尤其是体育竞技和游戏赛事直播,能够吸引多人参与,加速XR技术的商业落地。XR的内涵不断向外延伸,刷新着大众对视觉影像的理解。
未来所有基于现场艺术的场景,包括演出,赛事、大型活动以及其它定制化场景,都可以通过虚拟技术跨越时空的限制,体验一个更美好的虚拟现实。
对于普通用户来说,专业级别的大型VR直播和三维交互式技术相结合,可以实现虚拟化身真实体验进入现场的感受。在赛事,演出和大型活动一票难求的背景下,虚拟舞台将成为粉丝用户的优选。
总结
2020年是波折的一年,疫情和技术的双重推动下,人类社会正在开启一个全新的未来。
马化腾在《三观》前言中称:“现在,一个令人兴奋的机会正在到来,移动互联网十年发展,即将迎来下一波升级,我们称之为全真互联网。前言继续写到:“这是一个从量变到质变的过程,它意味着线上线下的一体化,实体和电子方式的融合。虚拟世界和真实世界的大门已经打开,无论是从虚到实,还是由实入虚,都在致力于帮助用户实现更真实的体验。随着VR等新技术、新的硬件和软件在各种不同场景的推动,我相信又一场大洗牌即将开始。就像移动互联网转型一样,上不了船的人将逐渐落伍。”
动感地带“来电之夜”这场虚拟演出是否开启了关于未来的一扇门,一扇关于XR娱乐行业发展的未来之门,我们不得而知。但可以肯定的是虚拟与现实的交融正在打开一个全新的世界,娱乐行业将首当其冲。
投稿/爆料:tougao@youxituoluo.com
稿件/商务合作: 六六(微信 13138755620)
加入行业交流群:六六(微信 13138755620)
元宇宙数字产业服务平台
下载「陀螺科技」APP,获取前沿深度元宇宙讯息