10秒搞定建筑日夜景转换,还自带中秋月光( 五 )

10秒搞定建筑日夜景转换,还自带中秋月光

图6/13

当处于某个层级L时,可通过 VGG19 提取出图片S和R对应的特征图FLS和FLR,对 S 和 R 建立映射。又通过利用概率进行快速匹配的 PatchMatch 算法(https://gfx.cs.princeton.edu/pubs/Barnes_2009_PAR/) ,分别建立了FLS到FLR的映射?LSR和FLR到FLS的映射?LRS。

10秒搞定建筑日夜景转换,还自带中秋月光

图7/13

PatchMatch 算法:

(http://vis.berkeley.edu/courses/cs294-69-fa11/wiki/images/1/18/05-PatchMatch.pdf)

但当 L>1 时,特征图的尺寸小于原图,将导致映射关系发生变化。重构的图片在形状、同语义像素等方面添加额外的约束后通过线性回归,可进行局部颜色迁移,以解决丢失部分原有一致性的问题。如尺寸还小于原图,将采用快速导向滤波 Fast Guided Filter(https://arxiv.org/pdf/1505.00996.pdf) 尽可能实现对细节的保留。

推荐阅读