AI自动生成基于笔画的矢量格式草图
2019年04月12日 由 老张 发表
791479
0
人类一直喜欢用草图来描绘人物、地点和事物,AI也开始在这一领域发挥其作用,在论文“Teaching GANs to Sketch in Vector Format”中,研究人员提出了一种神经网络,可以生成基于笔画的矢量格式草图。
该团队首先设计了一种新颖的基于GAN的架构SkeGAN,在73500次迭代中用公开数据集的一半进行了预先训练。然后,他们创建了第二个AI系统VASkeGAN,它是变分自动编码器(用于学习潜在表示的深度学习技术)和作为基线的GAN的组合。
他们采购了谷歌的数据集,包括345个不同领域的超过75000个样本,组成了一个训练数据集,其中包括猫,救火车,蚊子,瑜伽姿势等多种类别的草图。在PC上用Nvidia GeForce GTX 1080 Ti训练SkeGAN的总时长超过55小时。
为了量化生成的图形的质量,研究人员设计了一个度量标准Ske-score,定义为笔被举起的次数与接触纸张的次数之比。在另一项测试中,他们让45名受试者对草图的清晰度、绘画技巧和自然性进行打分,分值为1至5分。
该团队报告说,SkeGAN的草图在质量和数量上都比VASkeGAN生成的草图更好,并且与训练数据集相比,它生成的图形既更清晰,更自然。
此外,他们还观察到,通过改变温度,即控制模型预测随机性的变量,可以优化输入图像中不存在的“额外的视觉吸引力”特征,比如生成的猫的草图中胡须位置的变化。
研究人员写道,“重要的是,SkeGAN克服了'涂抹效应',笔不会抬起来在另一个地方画,而是停留在纸上并继续涂鸦,未来研究的方向包括将这项工作推广到更大的矢量艺术数据集,比如漫画。”