详细内容或原文请订阅后点击阅览
OpenAI 宣布推出 Point-E — 一种用于生成 3D 对象的系统
Point·E 是一种新的文本条件 3D 点云合成系统,它首先生成合成视图,然后生成以这些视图为条件的彩色点云。
来源:QudataOpenAI 宣布推出 Point-E — 一种用于生成 3D 对象的系统
总部位于旧金山的开放式人工智能平台 OpenAI 宣布推出 Point-E — 一种机器学习系统,允许用户根据简单的文本输入生成 3D 对象。
一组研究人员开发了一种全新的方法。Point-E 不会以传统方式创建 3D 对象。相反,它会创建点云,即空间中表示三维形状的离散数据点集。
生成点云比生成真实图像容易得多,但它们无法捕捉对象的细粒度形状或纹理 — 这是 Point-E 目前的一个关键限制。为了解决这一限制,Point-E 团队训练了一个额外的 AI 系统来将点云转换为网格。
Point-E 由两个模型组成:文本到图像模型和图像到 3D 模型。文本到图像模型类似于 OpenAI 自己的 DALL-E 2 等生成艺术系统,它使用带标签的图像进行训练,以了解单词和视觉概念之间的关联。另一方面,图像到 3D 模型则被赋予一组与 3D 对象配对的图像,以学习如何在两者之间进行有效转换。
这种方法的最大优势之一是它非常快,而且对生成最终图像所需的硬件要求不高。
OpenAI 研究人员指出,Point-E 的点云可用于制造现实世界的物体,例如通过 3D 打印。借助额外的网格转换模型,该系统还可以进入游戏和动画开发工作流程。
“我们发现 Point·E 能够根据文本提示高效地生成多样而复杂的 3D 形状。我们希望我们的方法可以作为进一步开展文本到 3D 合成领域工作的起点”,研究人员表示。
在论文中了解有关 Point·E 的更多信息代码可在 GitHub 上找到
论文 GitHub