BANG：通过生成式分解动态分割三维资产

3D创作一直是人类独有的优势，这得益于我们用眼、脑、手来解构和重组物体的能力。然而，目前的3D设计工具难以复制这一自然过程，需要大量的艺术专业知识和体力劳动。本文介绍了一种名为BANG的新型生成方法，它连接了3D生成与推理，实现了对3D物体的直观、灵活的部件级分解。BANG的核心是“生成式分解动态”（Generative Exploded Dynamics），它为输入几何体创建一系列平滑的分解状态，在逐步分离各部件的同时，保持其几何和语义上的一致性。 BANG利用一个预训练的大规模潜在扩散模型，通过一个轻量级的分解视图适配器针对分解动态进行微调，从而实现对分解过程的精确控制。它还集成了一个时间注意力模块，以确保平滑的过渡和跨时间的一致性。BANG通过空间提示（如边界框和表面区域）来增强控制，使用户能够指定要分解的部件及其分解方式。这种交互可以通过像GPT-4这样的多模态模型进行扩展，实现2D到3D的操作，从而获得更直观和更具创造性的工作流程。 BANG的功能还扩展到生成详细的部件级几何体，将部件与功能描述相关联，并促进面向组件的3D创作和制造工作流程。此外，BANG在3D打印领域也有应用，可以生成可分离的部件，以便于打印和重新组装。总而言之，BANG实现了从创意概念到详细3D资产的无缝转换，为创作提供了一个与人类直觉产生共鸣的新视角。