AI如何改变后期制作?这些工具正在让未来变成现实

2021-05-21 15:15


早在2016年,就已经有很多人在讨论,人工智能工具对影视行业的影响。五年过去了,AI调色、AI音频配乐、AI剪辑辅助、AI辅助2D转3D动画...在后期制作中, AI参与度变得越来越高。


AI帮助后期团队的最佳方式是是什么呢?它如何改变未来的工作流程呢?


我们和Adobe、Avid、Colourlab.ai、NVIDIA、EditShare、CrumplePop、Topaz Labs等正在致力于研发全新的AI后期制作工具的厂商进行了探讨。



AI如何减少重复性劳动?

 

“当前人工智能趋势非常令人兴奋”Andrew Page说。作为NVIDIA Media and Entertainment的高级技术总监,Page负责开发SDK,各种公司和工作室可以使用这些SDK,将AI添加到他们的工作流程中去。


对他而言,AI的最大价值(尤其是在后期制作中)是可以将传统的重复性工作自动化,例如标记元数据、上字幕甚至转描机技术。


“现在,AI可以让你更少的点击鼠标, 它使你有时间做更有意义的事情”。


比如,像是EditShare的EFS和Avid Media Composer这样的工具集成了AWS和MediaCentral之类的云AI服务,以便根据检测到的物体和人物自动添加元数据标签。每个素材都是自动管理,助理和剪辑师可以快速找到所需的镜头,从而使他们有更多的时间专注于创作。


如果面部识别还不够,AI还可以通过对话来管理和查找片段。在Media Composer中,Avid PhraseFind会自动分析所有项目素材,然后以语音方式索引声音对话。


而且,Avid ScriptSync不仅索引项目中的所有文本和声音对话,还将每个源剪辑与电影或电视剧本的台词相同步。然后,剪辑师可以根据场景编号、页码、单词或短语搜索来定位剪辑位置。


还有字幕制作。比如Premiere Pro最近更新的语音转文本和自动字幕功能,由Sensei机器学习提供技术支持,可以自动创建视频字幕,在时间线上自动生成字幕,会寻找的对话的节奏并匹配视频中的时间码。


再比如,像抠像这样的操作。通过AE中的Content Aware Fill(内容感知填充),只需单击几下即可帮助消除镜头中的吊杆话筒或其他不该出现的东西。以及AE全新的Roto Brush 2扣像工具,更是简化了手动绘制抠像区域的过程。



对于需要花费数小时去扣头发或叶片的人来说,就像我们前面所说过的那些节省时间的AI解决方案一样,这可能会改变他们的生活。


Adobe数字视音频战略发展经理Byron Wijayawardena说:“使用Roto Brush 2工具,创作者可以从场景中挑选演员,并将他们放置在完全不同的环境中,其本质上是对绿幕制作的一次革命,即使在不使用绿幕的情况下,也可以得到不错的扣像结果。”


Nvidia的Page补充说:“ Ai不再需要绿屏,它不需要学习绿色。”“它学习的是如何识别毛衣的轮廓或如何使头发与背景羽化。它实际上是对人物、特征或物体进行提取。你训练得越多,结果就会更加精确,这就是这些工具的力量,AI的学习能力。想象一下我们在为全球的特效师和Roto师做什么。”


AI如何减少素材补拍和节约成本?


除了自动执行重复性的工作外,AI后期制作工具还可以解决以前需要额外硬件或重新拍摄才能解决的问题。


诸如消除现场风噪音之类的问题,可以通过(自动智能消除风声音频降噪插件)CrumplePop的WindRemover AI这样的工具来解决。


CrumplePop创始人Gabe Cheifetz说:“目前,AI已被用来创造很多不可思议的东西,这很有趣,很新颖。” “但对于我们来说,使用AI来解决真正的问题才是重点。


自从发明麦克风以来,风的噪声一直是个问题。我们开发的插件WindRemover AI是一款非常实用的AI应用,可以很好的解决这个噪音问题。无论是大型制作公司还是个人YouTubers,都可以使用。” 


素材的分辨率提升是另一个非常棒的例子。无论是老视频修复,还是只是将较低分辨率的镜头插入到较新的高分辨率镜头中,分辨率提升都可以带来很大的不同。这在以前,是需要用昂贵的硬件做转换的,并且效果也不一定会特别理想。


现在,像是Topaz Video Enhance AI这样的工具可以改变这种情况。Video Enhance AI可以提高画质,还可以使用AI消除画面伪影,摩尔纹、失真以及其他可能困扰各种低质量相机和镜头的问题。



Topaz Labs产品开发人员Taylor Bishop解释说:“随着开发不断成熟,我们的AI很快将能够在帧间产生虚拟画面,创建出以前没有的帧。”“这可以保持你期望的质量同时,有效地将帧率提高两到三倍。”


还有我们常用的达芬奇,也在新版本中开始内置更多的Ai工具,用于帮助用户进行“画面变速处理”“分辨率上变换”“素材整理”“辅助色彩匹配“等操作。


当前,人工智能的速度并没有放缓。NVIDIA的GanVerse3D全新AI研究,可以在几秒钟内将2D图像转换为动画的3D模型(包括网格和纹理)。



我们最近测评了一个新系统,Dynascore,它使用人工智能通过分解音乐片段,将其重新组合成小段声音来创建与与你剪辑相匹配的配乐。


对于调色,Colourlab.ai也给我们留下了深刻的印象,Colourlab.ai是一款调色工具,它使用AI从参考镜头或图像中获取画面外观,并在整个时间线中应用,还可以针对不同机型对镜头进行辅助色彩匹配。 



未来的无限可能性


有一件事是所有专家都同意的,那就是当我们谈到人工智能如何改变未来时,我们只是触及了皮毛。


NVIDIA Media and Entertainment高级技术总监Andrew Page表示:“令人兴奋的事太多了。” “例如,语音识别的应用。未来艺术家们可以说“把这些素材导入时间线并像这样处理它们”?这是长远的愿景。”


正在开发AI的人群也可能也会发生变化。Valentic说:“当我刚开始对AI感兴趣时,令我感到沮丧的一点是,面向影视行业的AI工具主要是由工程师、程序员来开发的,很少有本身从事影视创作的从业人员去参与开发工作。”


在艺术创作中,每个人对好的标准是不同的,在未来,我们一定会看到更多的创作者去了解AI的工作原理、通过AI解决问题。”



原文链接:https://www.redsharknews.com/this-is-how-ai-is-transforming-the-post-production-industry



如果已经单独购买过会员平台课程的朋友,我建议你可以选择补差价的形式开通订阅会员服务。这样每天仅需1.9元就有400+课程可以随意学。此外还有订阅会员的专属微信群,供大家学习交流。


想学习更多实战技巧,欢迎添加微信:homeboytspx05。我们期待与您沟通交流~




本文为作者 HomeBoy Cine Studio 分享,影视工业网鼓励从业者分享原创内容,影视工业网不会对原创文章作任何编辑!如作者有特别标注,请按作者说明转载,如无说明,则转载此文章须经得作者同意,并请附上出处(影视工业网)及本页链接。原文链接 https://cinehello.com/stream/136770

HomeBoy Cine Studio

点击了解更多
HOMEBOY 电影数字洗印厂是一家专注创意、品质、技术流程的后期调色公司,调色业务涵盖剧情片、广告、MV;前期DIT;最终合片、影院DCP打包。 更多作品及信息,请查看官网: http://colorgrading.cn
扫码关注
HomeBoy Cine Studio