美人秀色空绝世，我用PS-GAN试伊妆( 三 )_选自arXiv作者：WentaoJiang等机器之心

图2/10

论文地址：https://arxiv.org/pdf/1909.06956.pdf

什么是 PSGAN

这种 PSGAN 主要分为三部分：妆容提炼网络（MDNet）、注意式妆容变形（AMM）模块和卸妆-再化妆网络（DRNet）。

得益于当前风格迁移方法的发展，使用妆容矩阵，模型仅需对特征图（feature map）执行一次缩放和位移就能实现妆容迁移。但是，妆容迁移比风格迁移问题更复杂一些，这既需要考虑得到结果，也需要考虑妆容样式的细微细节。

研究者提出使用 MDNet 将参照图像的妆容提炼为两个妆容矩阵 γ 和 β，两者具有与视觉特征一样的空间维度。然后，通过 AMM 模块对 γ 和 β 进行变形处理，使其适应源图像，从而得到自适应妆容矩阵 γ' 和 β'。

这个 AMM 模块可以解决因为姿态差异而导致的不对齐问题，从而使 PSGAN 能稳健地处理不同姿态。最后，新提出的 DRNet 会首先对源图像进行卸妆，然后再在卸妆后的结果上通过逐像素加权的乘法和加法来应用矩阵 γ』和 β』，执行再化妆（re-makeup）。

美人秀色空绝世，我用PS-GAN试伊妆( 三 )