学界 | 新的快速图像转手绘方法,人类水准、户外场景( 四 )

数据集中部分手绘图像(带有笔画方向及顺序)

论文摘要:边界、边线、轮廓,这三者在计算机图形学和计算机视觉两个领域都是重要的研究课题。一方面,它们是表达了三维形状的二维平面元素;另一方面,它们是互相遮盖的物体的指示器,我们正是借助它们才能分辨不同的物体或者语义概念。在这篇论文中,作者们的目标是生成物体轮廓绘画,也就是类似边线的笔画,通过它们勾画出视觉场景的主要线条。早期的研究中通常把这类任务称作“边缘检测”。然而,边缘检测任务的理想输出中包含的视觉元素与轮廓绘画之间其实有着不小区别,而且也缺失了轮廓绘画中的艺术风格。作者们解决这个问题的方式是收集了一个新的轮廓简笔画数据集,并提出了一种基于学习的方法来解析不同的标注之间的多样性;而且与边缘检测器不同的是,他们的方法可以在真实照片和手绘素材不完全对齐的情况下工作。相比以往的方法,作者们的方法定型、定量地都取得了更好的表现。令人惊讶的是,当作者们在 BSDS500 数据集上精细调节模型时,他们在突出边界检测任务中取得了目前最好的成绩,这表明他们的轮廓绘画可能可以成为边缘标注的一种可拓展的替代方案,但同时对于标注人员来说更容易做、也更有趣。

推荐阅读