专访《创世之音2》SMG子午工作室,观首创国潮风“歌舞剧”式虚拟演唱会
近日,在次元文化中引起空前反响的《创世之音》继第一季之后,第二季又带来了全新视觉升级之作,15位虚拟主播在B站上开启赛博与蒸汽朋克风的元宇宙虚拟演唱会。节目制作团队为了表现更细腻的画质,采用由引擎渲染输出的3D场景,加入光线追踪反射与光线跟踪AO等技术,呈现帧帧精良的画面。它突破上一季“演唱者+舞台表演+RPG剧情”模式,开创了国内首档由虚拟偶像主演的全原创歌舞剧这一先河。
《创世之音》第二季是SMT(上海东方传媒技术有限公司)与B站二度联手合作的,SMT子午工作室利用其先进的技术,在演唱会中加入了完整的故事情节线,音乐为剧情服务,为我们带来了空前的震撼效果。此次演唱会更是激起了大家对制作团队的兴趣,迪生为此专访了幕后团队—子午工作室雪风军团。
子午工作室简介:
工作室致力于缔造顶尖数字娱乐内容制作,集前期创意、内容制作、技术研发为一体,拥有丰富的制作经验和深厚的设计实力。拥有前沿的数字技术,与自主研发的「VAS System」相融合的全新动画制作平台。运用全新的数字创新技术以及光学动作捕捉技术,为二次元虚拟偶像提供全方位的定制服务,用更多元的方式孵化IP。
采访内容:
小迪:是什么契机让子午工作室开始关注虚拟偶像、虚拟主播制作?
子午:是偶然机会和学校一起测试和开发了第一套虚拟角色,当它在学校大屏上表演时觉得挺有意思的,决定继续研发和深入挖掘这种形式的潜能和可能性。
小迪:《创世之音》第二季与第一季在制作上有哪些突破?
子午:创世之音第一季是纯粹的歌曲mv形式,一共有17首歌曲。第二季我们团队以歌舞剧的形式重新演绎了创世之音的主题,从设计到成片,18个大场景、22套人物资产、18首原创曲目、45分钟虚拟拍摄,虽然从制作量上到制作难度和周期上的压力都大过了第一季,却完成了一次自我突破。
小迪:《创世之音》第二季制作中的关键技术有哪些?
子午:相比较于第一季,此次《创世之音》第二季虚拟偶像除了唱跳部分的表演外,还加入了大量剧情表演,包括一定比重的动作打戏,无疑对制作技术提出了更高的要求。这得益于创作团队潜心自主研发的Unreal 引擎的虚拟拍摄导控系统,不仅完美实现了虚拟角色实时表演、实时互动的需求,还通过采集真人的动作和面部形变的数据,经过优化的算法和CGI技术的融合,使得虚拟人物的动作和表情演绎更为真实细腻,从而表达更多情绪。提到虚拟拍摄的实时效果就不得不提及我们使用的迪生Vicon动捕设备,我们自主开发了将Vicon动捕点贴在摄像机上,通过接口和算法将现实中摄像机实时数据传回UE中以驱动虚拟摄像机的运动。
小迪:动捕技术的应用对于原工作流程带来了哪些影响和改变?
子午:动捕技术是虚拟偶像录制和实时演出的基石,这几年来动捕棚广泛使用大大提高了传统CG动画的生产效率,让数字偶像实时的和观众交互成为可能。Vicon的动捕技术结合其软件Shogun的准确性和稳定性,加上可以同步实时捕捉手指信息的泛用性让我们团队在数字虚拟偶像的内容生产上效率和效果并行,在保证节目内容效果品质的前提下,生产效率飞速提高。
小迪: 在“十四五”规划提出的“加快数字化发展 建设数字中国”战略背景下,子午工作室将继续为虚拟偶像、虚拟主播做哪些技术服务?
子午:子午工作室是隶属于SMG旗下上海东方传媒技术有限公司(SMT)设立的工作室,我们一直致力于推动优秀的文化内容传播,在国创与国潮内容兴起的当下再结合NET与元宇宙的热度,我们将推出更多技术先进,内容内核更完备,年轻用户更喜欢的虚拟偶像、数字角色。
将国潮与元宇宙相结合可以打造属于中国的文化特色,也让虚拟偶像具有“艺术+技术”的双重基因,其中迪生的Vicon动捕为虚拟偶像连接虚拟与现实世界提供高度互通的技术工具,让虚拟人物与观众实时交互更加流畅自然。未来迪生愿与更多的创意制作团队进行深度合作,提供完整的定制化技术解决方案。
迪生数娱
点击了解更多迪生数娱