2018最佳GAN论文回顾(上)( 九 )

详述

该论文已于2018年12月12日提交 , 代码很快就将会发布 。 另外 , 对于那些想更多了解这种方法但并不想阅读论文的人来说 , 博客上发表了一篇很好的总结文章 。

主要思想:

这项工作提出了关于GAN框架的另一个观点 。 更具体地说 , 它从样式转换设计中吸取灵感 , 创建了一个生成器架构 , 在生成的图像中可以学习高级属性(如年龄、在人脸或背景上训练时的身份、相机视角)和随机变化(雀斑、头发细节) 。 它不仅学习自动分离这些属性 , 而且还允许我们以非常直观的方式控制合成 。


补充的结果回顾视频

方法:


传统的GAN架构(左)与基于样式的生成器(右) 。 在新的框架中 , 我们有两个网络组件:映射网络f与综合网络g 。 前者将一个潜在的代码映射到一个中间的潜在空间W , W对样式的信息进行编码 。 后者利用生成的样式和高斯噪声来创建新的图像 。 块“A”是一个训练过的仿射转换 , 而块“B”将训练过的每个通道的比例因子应用于噪声的输入 。

推荐阅读