三星开发人工智能,无需3D建模即可为绘画和照片添加动画效果
2019年05月23日 由 yining 发表
734666
0
三星位于莫斯科的AI中心和Skolkovo科学与技术研究所的工程师和研究人员创建了一个模型,可以从图像中生成逼真的动画,而无需像3D建模这样的传统方法。
工程师EgorZakharov在解释结果的视频中说:“实际上,学习的模型是一个人的现实化身。”
文中所见的著名面孔包括玛丽莲梦露,爱因斯坦,达芬奇的《蒙娜丽莎》。专注于合成真实头像和面部特征的技术可应用于视频游戏,视频会议或虚拟映像,如三星Galaxy S10现有的那种。 Facebook还在为其虚拟现实计划制作逼真的虚拟形象。
这种技术显然也可以用来创造深度伪造。
少数镜头学习意味着模型可以仅使用个体的一些甚至一个图像来开始使面部动画化。在模型可以对以前看不见的面制作动画之前,首先对视频的voxceleb2数据集进行元训练。
在训练过程中,系统创建三个神经网络:嵌入式网络将帧映射到图像,生成器网络映射合成视频中的面部特征,并且鉴别器网络评估生成的图像的真实性和姿势。
“至关重要的是,系统能够以特定的方式初始化生成器和鉴别器的参数,这样,即使需要调整数千万个参数,培训也只需几张图像,并快速完成。这种方法能够学习到非常个性化的新人物的头部模型,甚至肖像画,”合著者在一篇关于arxiv的论文摘要中说。
在最近为模仿人类面孔而开发的其他形式的人工智能中,华盛顿大学的研究人员分享了他们如何创建奥巴马网络,这是一种基于Pix2Pix的唇形同步模型,该模型是在前美国总统的视频上进行训练的。
加州大学伯克利分校的研究人员于去年秋天推出了一款模型,该模型使用YouTube视频训练AI数据集进行舞蹈或进行后空翻等杂技动作