工具介绍
DeepFaceDrawing: 从素描中生成人脸图像 我们的系统有一个版本是使用 Jittor 实现的,您需要在本地安装 Jittor 才能使用。
DeepFaceDrawing: 从素描生成人脸图像的深度学习系统 我们有一个使用 Jittor 实现的版本,您需要先安装 Jittor。我们还将提供一个基于 PyTorch 的版本。
摘要 近期的深度图像到图像转换技术可快速生成从自由手绘的图像。然而，现有的解决方案往往过于依赖于手绘图像，因此需要专业的手绘图像甚至边缘图像作为输入。为了解决这个问题，我们的关键思想是隐式地建模可行的面部图像的形状空间，并在这个空间中合成一个面部图像，以接近输入的手绘图像。我们采用了从局部到全局的方法。首先，我们学习了关键面部组件的特征嵌入，并将输入手绘图像的相应部分推向由面部组件样本的特征向量定义的底层组件流形。此外，我们还提出了另一种深度 神经网络，用于从嵌入的组件特征到逼真图像学习映射，其中多通道特征图作为中间结果来提高信息流。我们的方法基本上将输入手绘图像作为软约束，因此即使从粗糙和/或不完整的手绘图像中也能生成高质量的面部图像。我们的工具易于使用，即使非艺术家也可以使用，同时仍然支持对形状细节的精细控制。定性和定量评估表明，我们系统的生成能力优于现有的和替代方案。用户研究证实了我们系统的可用性和表达力。
前提条件