近日,3499cc拉斯维加斯2022级电子信息专业研究生张林以第二作者(导师一作)在中科院一区TOP期刊《pattern recognition》上发表研究论文,论文题目为《HairManip:High Quality Hair Manipulation via Hair Element Disentangling》。
该论文是在我校赵辉煌教授的指导下完成,3499cc拉斯维加斯为第一署名单位。论文核心理论是:由于头发材质和形状的复杂多样使得头发编辑具有挑战性。许多现有的方法使用参考图像、绘制好的遮罩对头发进行编辑,已经取得比较好的结果。然而,由于源头发颜色、形状和目标头发之间的差异性,导致现有的方法生成的结果有时并不真实、自然。因此,我们提出一种新的头发编辑方法命名为HairManip。我们将输入的源图像的头发信息进行解耦,分离成形状和颜色信息,并训练相应的发型和发色编辑子网络来分别处理这些复杂的信息,从而实现对头发更加精细的操纵。为了进一步提高编辑头发的效率和精度,我们设计了一个新的latent code 预处理模块来提取头发区域的有效特征,提高模型的编辑能力和生成图像的质量。实验结果表明,得益于精心设计的网络结构和损失函数,我们的方法在编辑准确性和真实性方面取得了显著效果。代码见https://github.com/Zlin0530/HairManip。
文字:张林、杨圆