⏶6
StrandDesigner:通过草图引导实现实用链条生成
发表
由
Chengming Xu 提交
作者: Na Zhang, Moran Li, Chengming Xu, Han Feng, Xiaobin Hu, Jiangning Zhang, Weijian Cao, Chengjie Wang, Yanwei Fu
摘要
逼真的发丝生成对于计算机图形和虚拟现实等应用至关重要。虽然扩散模型可以从文本或图像生成发型,但这些输入缺乏精确性和用户友好性。因此,我们提出了第一个基于草图的发丝生成模型,它提供了更精细的控制,同时保持了用户友好性。我们的框架通过两项主要创新解决了关键挑战,例如复杂的发丝交互建模和多样的草图模式:一种可学习的发丝上采样策略,将 3D 发丝编码到多尺度潜在空间中;以及一种多尺度自适应条件机制,使用带有扩散头的 Transformer 来确保不同粒度级别之间的一致性。在多个基准数据集上的实验表明,我们的方法在真实感和精确性方面优于现有方法。定性结果进一步证实了其有效性。代码将发布在 [GitHub](https://github.com/fighting-Zhang/StrandDesigner)。
StrandDesigner 是首个基于草图的 3D 发束生成框架,它采用多尺度可学习上采样策略和自适应条件机制,实现用户友好控制。