创建 3D 资产是最耗时、最具挑战性的创意任务之一。如果人工智能助手能够根据文本输入生成三维内容，那么它将使三维内容创作普及化，并对视频游戏和电影行业以及 AR 和 VR 应用程序的开发大有帮助。

Meta 的人工智能研究团队最近推出了 Meta 3D Gen (3DGen)，这是一种用于文本到 3D 素材生成的最先进的新系统。Meta 声称，这一新系统可以在一分钟内生成高质量的 3D 素材。生成的三维素材将具有高分辨率纹理和材质贴图。3DGen 还支持基于物理的渲染（PBR）和对以前生成的 3D 素材进行生成再纹理。

Meta 3D Gen 结合了两个主要组件：文本到 3D 生成和文本到纹理生成。下面是它的工作原理：

• 第一阶段：三维素材生成--根据用户提供的文本提示，第一阶段使用 Meta 的三维素材生成模型（AssetGen）创建初始三维素材。这一步将生成带有纹理和 PBR 材质贴图的 3D 网格。推理时间约为 30 秒。

• 第 2 阶段：

• 用例 1：生成三维纹理细化--根据阶段 1 生成的三维素材和初始文本提示，阶段 2 将为该素材生成更高质量的纹理和 PBR 贴图。它使用 Meta 的文本到纹理生成器 Meta 3D TextureGen。推理时间约为 20 秒。

• 用例 2：生成三维（再）纹理--给定一个未纹理化的三维网格和一个描述其所需外观的提示。阶段 2 还可以从头开始为该三维素材生成纹理（网格可以是以前生成的，也可以是艺术家创建的）。推理时间约为 20 秒。

您可以在这里阅读 Meta 3D Gen 的技术论文全文。

Meta 公司还发表了技术论文，介绍他们用于高质量三维模型生成和基于文本提示的纹理生成的方法，这些方法是 Meta 3D Gen 系统的基础。