一张2D图片就能进行3D面部建模!
2017-09-28 11:06
诺丁汉大学和金斯顿大学的计算机科学家最近解决了一个困扰视觉及图形研究专家的难题。两所大学的研究小组已经开发出一种用一张2D照片生成3D脸部模型的技术应用。通过一张2D照片,这项技术能够重建并生成3D脸部图像。
这项新的应用让人们可以上传一张彩色图片,数秒后就能够生成显示他们脸部轮廓的3D模型。至今已有超过40万人上传自拍照进行测试。
要解决这个问题是非常困难的。现有的系统需要许多面部图像,除此之外还面临着许多其他挑战,包括脸部姿势、表情的匹配和不均匀照明等问题。这项研究成果运用了人工智能(AI)领域的卷积神经网络(CNN)技术,使计算机在没有详尽的编程情况下进行学习。
立体像素化(Voxelisation)的过程对准2D图像创建了一个3D体积的面部网格
研究组由Yorgos Tzimiropoulos博士指导,用一个巨大的2D图片和3D脸部模型库对计算机进行训练。通过这些信息,卷积神经网络(CNN)能够猜测并模拟脸部看不见的部分,从一张2D图像中重建3D脸部几何图形。这项成果也表明深度学习的某些可能性—机器使用人造神经网络模仿大脑连接大批信息间进行学习的可能性。
Yorgos Tzimiropoulos博士曾说过:“这项技术的新奇主要在于它简化了我们的方法,绕过了其他技术通常使用的复杂流程。我们提出用一个大型神经网络训练的方法,利用8万张脸直接让系统学习用一张2D图片输出3D脸部几何形状”。
除此之外,技术中包含的脸部和情感认知应用还可以用于电脑游戏个性化设置,推进AR的应用,甚至是建模技术的发展。这种技术对3D建模的简化和改变若能运用在影视制作上,相信必能大幅度提高影视制作的效率。除此之外,该技术还可以应用在医疗方面包括模拟整形手术以及帮助了解医学状况例如自闭症和抑郁症上。
该技术成果十月将在威尼斯的计算机视觉国际会议(ICCV)上进行发表。
这项新的应用让人们可以上传一张彩色图片,数秒后就能够生成显示他们脸部轮廓的3D模型。至今已有超过40万人上传自拍照进行测试。
要解决这个问题是非常困难的。现有的系统需要许多面部图像,除此之外还面临着许多其他挑战,包括脸部姿势、表情的匹配和不均匀照明等问题。这项研究成果运用了人工智能(AI)领域的卷积神经网络(CNN)技术,使计算机在没有详尽的编程情况下进行学习。
立体像素化(Voxelisation)的过程对准2D图像创建了一个3D体积的面部网格
研究组由Yorgos Tzimiropoulos博士指导,用一个巨大的2D图片和3D脸部模型库对计算机进行训练。通过这些信息,卷积神经网络(CNN)能够猜测并模拟脸部看不见的部分,从一张2D图像中重建3D脸部几何图形。这项成果也表明深度学习的某些可能性—机器使用人造神经网络模仿大脑连接大批信息间进行学习的可能性。
Yorgos Tzimiropoulos博士曾说过:“这项技术的新奇主要在于它简化了我们的方法,绕过了其他技术通常使用的复杂流程。我们提出用一个大型神经网络训练的方法,利用8万张脸直接让系统学习用一张2D图片输出3D脸部几何形状”。
除此之外,技术中包含的脸部和情感认知应用还可以用于电脑游戏个性化设置,推进AR的应用,甚至是建模技术的发展。这种技术对3D建模的简化和改变若能运用在影视制作上,相信必能大幅度提高影视制作的效率。除此之外,该技术还可以应用在医疗方面包括模拟整形手术以及帮助了解医学状况例如自闭症和抑郁症上。
该技术成果十月将在威尼斯的计算机视觉国际会议(ICCV)上进行发表。
本文为作者 影视匠造 分享,影视工业网鼓励从业者分享原创内容,影视工业网不会对原创文章作任何编辑!如作者有特别标注,请按作者说明转载,如无说明,则转载此文章须经得作者同意,并请附上出处(影视工业网)及本页链接。原文链接 https://cinehello.com/stream/95200
影视匠造
点击了解更多
首汇焦点(北京)科技有限公司成立于2015年4月,公司创建的宗旨是建立符合工业标准的全流程影视制作和管理系统。公司采用IT和互联网的优秀技术,结合传统制造业严谨的生产流程及质量控制,将新技术和新方法大规模应用于国内传统影视行业中。目前公司的主要业务有影视制作管理服务、数字高精度模型生产、影视特效制作等,旨在为影视制作公司、游戏公司和新兴VR(虚拟现实)行业提供一体化科学的解决方案。
扫码关注
影视匠造
影视匠造