Meta 推出了一种名为 3D Gen 的新型 AI 系统,可以在不到一分钟的时间内根据文本描述创建高质量的 3D 对象。 据 Meta 称,该公司用于生成 3D 内容的新型 AI 工具名为 3D Gen,可以在不到一分钟的时间内根据文本描述生成高质量的 3D 对象。 3D Gen 结合了 Meta 现有的两个模型:用于生成 3D 对象的 AssetGen 和用于纹理的 TextureGen。Meta 表示,这种集成可以为沉浸式内容生成更高质量的 3D 内容。 Meta 的 3D Gen 优于其他方法,速度提高了 60 倍 该系统分为两个步骤:第一步,AssetGen 会在大约 30 秒内根据文本描述生成具有纹理和基于物理的渲染 (PBR) 的 3D 对象。第二步,TextureGen 可以根据原始描述优化步骤 1 中生成的对象的纹理,或者使用新规范为任何非结构化 3D 网格创建纹理。第 2 步每个步骤大约需要 20 秒。由于 3D Gen 支持 PBR,因此可以重新点亮生成的资产。 这两个阶段均基于 Meta 的Emu系列文本转图像模型。这些模型使用合成 3D 数据进行优化,以便在图像和 UV 空间中生成多视图,该团队表示这可以改善纹理。 据 Meta 称,3D Gen 在速度和质量方面优于领先的行业解决方案。该论文指出,在用户研究中,专业 3D 艺术家对该工具的评价在大多数类别中都优于竞争对手,尤其是对于复杂请求。Meta 表示,它比同类系统快 3 到 60 倍。 Meta 将 3D Gen 视为迈向个性化、用户生成 3D 内容的重要一步。此类内容可由人工智能辅助的 3D 助手生成,并用于在元宇宙中构建虚拟世界。
|