HairCLIP：通过文本和参考图像设计您的发型

文章预览

摘要   发型编辑是计算机视觉和图形学中一个有趣且具有挑战性的问题。   许多现有方法需要绘制精良的草图或掩码作为编辑的条件输入，但是这些交互方式既不直接也不高效。   为了使用户免于繁琐的交互过程，本文提出了一种新的发型编辑交互模式，该模式能够基于用户提供的文本或参考图像单独或联合地操作头发属性。   为此，我们在一个共享的嵌入空间中编码图像和文本条件，并通过利用对比语言图像预训练 (CLIP) 模型强大的图像文本表示能力，提出了一个统一的发型编辑框架。   通过精心设计的网络结构和损失函数，我们的框架可以以一种解耦的方式执行高质量的发型编辑。   广泛的实验表明，我们的方法在操作精度、编辑结果的视觉真实性和无关属性的保留方面具有优越性。   项目代码库：https://github.com/wty-ustc/HairCLIP。   图1： ………………………………