全球首个3D AI主播火了 虚拟制作时代将至

FEELFINE

比想象 更非凡

近日，在两会上亮相的全球首个3D AI合成主播“新小微”火了一把！她不仅能实现一秒换装、360度无死角播报，还可以站起身在虚拟演播中穿梭，肢体语言也较为丰富灵活。

未来已来！“新小微”的出现让我们看到了虚拟制作技术的广泛应用，那么影视制作领域里的虚拟制作，又将带给我们怎样的惊喜呢？非凡传媒又做了哪些准备和工作呢？

相较于之前的2D AI主播“新小浩”、“新小萌”等，这位名为“新小微”的3D AI合成主播在真实度、立体感、灵活度、可塑性、交互能力等多个方面都有大幅跃升。

以上依次为新小浩、新小萌、新小微

据介绍，3D AI合成主播“新小微”以新华社记者赵琬微为原型，首先通过扫描还原、面部肌肉驱动、表情肢体捕捉等技术，生产出高度逼真的数字人模型；同时结合多模态建模技术，使用语音、图像、文本、3D肌肉运动数据等多模态信息完成联合建模训练生成。

赵琬微正在进行数据采集（图片来自网络）

事实上，对于3D扫描建模、表情动作捕捉等技术，影视从业者应该并不陌生。它们在影视制作中应用已久且日益广泛，比如我们熟悉的《阿凡达》、《星球大战》系列，以及国内的《爵迹》、《疯狂的外星人》等影片中均有应用。

而“新小微”与那些影视角色的不同之处在于，“她”只需要在前期采集数据生成人物模型，之后再通过AI算法智能驱动来完成人物的表情和动作，不需要真人全程进行跟踪拍摄。

“新小微”的诞生，从某种程度上可以说是人工智能＋虚拟制作的结果。

作为一家影视全流程制作服务企业，非凡传媒在人工智能与虚拟制作领域展开了积极的合作与研发，经过一年多的时间，成功开发出了全数字流程人工智能特效解决方案。

全数字流程人工智能特效解决方案是在三维数字造型、动作捕捉，以及辅助动画制作等技术的基础上，以人工智能摄影机运动控制系统为核心的全新特效制作流程。

以一部机器人项目为例，我们制作出3D机器人模型，然后通过动作捕捉再加上辅助动画，解决了机器人基本的造型及动作问题。

而关于影片的镜头，基于虚拟的3D机器人，自然无法使用常规的拍摄手法，而解决这一问题的方法就是数字镜头设计＋智能摄影机运动控制系统。

作为整个特效镜头运动的基准，机器人的镜头设计可以不受掣肘，无限、反复地尝试和调整，直至得到满意的镜头画面。

效果示例（非最终画面）

基准镜头设计完成之后，将镜头设计数据载入人工智能摄影机运动控制系统，摄影机运动控制系统会无误差、无限重复地运行镜头基准数据。

效果示例（非最终画面）

这部机器人影片中运用到了大量的虚拟制作，非凡传媒在逐步实现虚拟技术落地的同时，也在积极探索5G结合虚拟制片技术在影视制作中的其他应用，包括拍摄现场的4k超清视频同传、视效实时渲染，以及优质的视效资产库创建、多用户远程协作、数据跟踪与管理等，进一步优化影视工业化生产流程。

关于虚拟制片技术对于影视生产流程的优化，这不仅仅是后期制作前置化的转变，更多的是前后期制作一体，前期工作者能够实时看到现阶段的拍摄成果并进行调整，提高了他们的参与性与创作积极性；后期工作者可以实时了解到拍摄进程与画面，以便进行下一步的优化，减少了沟通成本。

对于项目方来说，虚拟制片的应用将大大增加项目的生产可控性，这意味着影片会更容易达到预期设定的结果。此外，还将减少项目的制作周期、降低制作成本，同时还能沉淀大量的虚拟资产，而虚拟制片技术又赋予了这些虚拟资产更多的应用场景。

我们相信，经过一段时间的研究、探索和实践，虚拟制片技术将广泛应用于更多领域，为影视工作者提供更多便利。非凡传媒也将在影视制作技术上不断探索，为影视剧项目提供更多的制作解决方案，为观众带来更为精彩的视听体验。

想了解更多信息，欢迎在文章下方留言。