英语轻松读发新版了,欢迎下载、更新

新的NVIDIA AI系统段2D图像中可编辑的3D模型

2025-07-02 07:27:03 英文原文

作者:Paloma Duran

GPU制造商Nvidia已经引入了PartPacker,这是一种基于AI的系统,旨在从单个2D图像中生成可编辑的3D模型。与产生统一网格的传统方法不同,PartPacker创建了基于零件的模型,从而使单个组件可以分别进行编辑或动画,以提高灵活性。

该系统旨在通过促进资产创造并实现更详细的自定义,支持各个领域的工作流程,包括3D打印,动画,游戏和学术研究。

partpacker背后的研究是与北京大学斯坦福大学。

零件级别的3D对象。通过NVIDIA图像。

partpacker的概述和功能

PartPacker通过利用扩散变压器体系结构中的双重音量包装技术来从单个2D RGB图像中生成高度详细的3D对象。这种方法将零件排列成互连的卷,每个卷都可以独立编辑或动画,以提高灵活性。系统网络将VAE与整流的流模型一起集成,该模型完善了在输入图像上的潜在代码。与传统方法不同,PartPacker同时生成两个潜在代码,而不仅仅是一个潜在代码,从而改善了细节和控制。

Dual Volume Packing.
双重包装。通过NVIDIA图像。

PartPacker以GLB格式输出3D三角形网格,分辨率高达512′,针对NVIDIA GPU加速进行了优化。这种能力有助于创建适合游戏,电影和互动媒体的高质量3D资产。此外,它支持流行的3D打印格式的导出,例如STL和3MF,从而实现了多物质印刷工作流程。

优点和可用性

常规的3D生成方法通常会产生限制各个部分修改的单片网格。PartPacker通过生产模块化的,可编辑的组件来解决此限制,提供了一种灵活的替代方案,该替代方案使需要可定制的3D资产的行业受益。该技术使创作者和研究人员能够从单个图像中产生可编辑的,部分基于部分的3D模型,从而实现以前具有挑战性或不可行的工作流程。

研究人员和开发人员可以通过GitHub存储库访问PartPacker,该存储库提供了网格转换所需的源代码和数据处理脚本。此外,在拥抱脸上举办的实时演示使用户可以上传图像并立即生成可编辑的3D模型。还可以下载预训练的VAE和流模型,以支持来自图像的网格重建和3D生成。

3D对象的比较表。通过NVIDIA图像。

有关更多信息,请访问Nvidia

AI驱动的3D模型工具 

2024年,总部位于深圳的3D打印机制造商BAMBU实验室发行Printmon Maker,其新的AI驱动的3D模型生成器。该平台可通过MakerWorld获得,使用户可以使用文本或图像提示创建3D可打印字符。生成的设计可以直接导入到Bambu Lab的切片软件中,并在其3D打印机上打印,而无需手动调整。此外,该工具还支持为眼睛和基地等组件创建单独的文件,从而在3D打印工作流中提供更大的灵活性和自定义。

去年,Nvidia创建了魔术3D文本到3D模型响应Google的工具梦想提供和Physna Inc.3D模型和场景的生成AI原型。NVIDIAS AI平台在研究论文中概述了两阶段的方法,该方法创建了一个粗糙的低分辨率模型,然后将其优化为更高的分辨率。Magic3D还可以进行基于及时的3D网格编辑。一旦上载了基本提示和低分辨率3D模型,就可以修改文本以更改结果模型。” 

加入7月10日我们的增材制造优势(AMAA)活动,来自航空航天,空间和国防部的AM领导者聚集在一起,共享关键任务的见解。在线,免费参加。立即确保您的位置

谁赢了2024 3D印刷行业奖

订阅3D打印行业通讯跟上最新的3D印刷新闻。

你也可以跟随我们LinkedIn,并订阅3D打印行业YouTube访问更多独家内容的渠道。

特色图片显示 双重体积包装,图像通过NVIDIA。

关于《新的NVIDIA AI系统段2D图像中可编辑的3D模型》的评论


暂无评论

发表评论

摘要

NVIDIA推出了PartPacker,这是一种AI系统,通过创建模块化组件以提高灵活性,从单个2D图像中生成可编辑的3D模型。PartPacker是由北京大学和斯坦福大学开发的,在扩散变压器体系结构中使用双重体积包装技术,以高达512³分辨率的GLB格式生产高度详细的3D对象。该系统支持以STL和3MF格式出口,用于多物质打印工作流程。PartPacker在GitHub上可用,并带有实时演示,可以在拥抱面孔上进行现场演示,从而提供了预训练的网格重建和从图像中产生的模型。