2 个月前

单个增强训练样本的图像形状操作

Yael Vinker; Eliahu Horwitz; Nir Zabari; Yedid Hoshen
单个增强训练样本的图像形状操作
摘要

在本文中,我们介绍了DeepSIM,这是一种基于单张图像的条件图像操作生成模型。我们发现,广泛的增强技术对于实现单张图像训练至关重要,并采用了薄板样条(thin-plate-spline, TPS)作为有效的增强方法。我们的网络学会了将图像的基本表示映射到图像本身。基本表示的选择对操作的简便性和表现力有重要影响,可以是自动的(例如边缘),手动的(例如分割)或混合的(例如在分割基础上添加边缘)。在进行图像操作时,我们的生成器可以通过修改基本输入表示并通过网络映射来实现复杂的图像变化。实验结果表明,我们的方法在图像操作任务中表现出显著的效果。