香港科技大学、腾讯AI实验室的研究人员推出新颖3D建模系统CraftsMan，它能够生成高保真的3D几何体，这些几何体形状多样、网格拓扑规则，并具有详细的表面细节。更重要的是，CraftsMan允许以交互式的方式对几何体进行细化。CraftsMan通过结合3D原生扩散模型和交互式几何细化技术，为3D建模领域带来了一个既快速又灵活的解决方案，极大地提高了3D内容创作的效率和质量。
- 项目主页：https://craftsman3d.github.io
- GitHub：https://github.com/wyysf-98/CraftsMan
- Demo：https://huggingface.co/spaces/wyysf/CraftsMan
例如，你是一名游戏设计师，需要为即将推出的视频游戏设计一个虚构的生物。使用CraftsMan，你只需提供一个描述性文本或参考图像，系统就能生成这个生物的3D模型。如果初步生成的模型不够完美，你可以使用交互式工具对模型的特定部分进行编辑，比如添加或调整生物的毛发细节，直到模型完全符合你的设计愿景。
主要功能：
- 高保真3D几何体生成：CraftsMan能够根据单个参考图像或文本提示生成复杂的3D形状。
- 交互式几何细化：用户可以手动编辑和改进生成的3D网格，以更好地符合预期的设计。
主要特点：
- 高效率：与传统的3D建模方法相比，CraftsMan能够在短时间内生成3D资产。
- 规则网格拓扑：生成的3D几何体具有规则的网格结构，便于后续处理和编辑。
- 细节丰富：通过细化过程，可以显著提升表面细节，使3D模型更加逼真。
工作原理：
- 粗略几何生成：使用3D原生扩散模型，从潜在空间中学习3D表示，快速生成具有规则网格拓扑的粗糙几何体。
- 多视图扩散模型：输入参考图像或文本提示，生成多视图图像，作为3D扩散模型的条件输入。
- 基于法线的几何细化：使用基于法线的几何细化器自动或交互式地增强表面细节。
具体应用场景：
- 视频游戏：为游戏角色和环境元素创建高质量的3D模型。
- 增强现实(AR)：生成适合AR应用的详细3D对象。
- 电影制作：为电影中的特效和场景制作精细的3D资产。
0条评论