英语轻松读发新版了,欢迎下载、更新

开始使用comfyui和nvidia rtx ai PC的生成AI来创建内容

2025-09-09 13:05:38 英文原文

作者:Michael Fukuyama

``一个开源的,基于节点的图形界面,用于运行和构建用于内容创建的生成AI工作流程 - 上个月发布了重大更新,包括NVIDIA RTX GPU的高达40%的性能改进,以及对新AI模型的支持,包括WAN 2.2,包括WAN 2.2,Qwen-Image,Flux.1 Kreea.1 Krea.1 Kreea [dev] dev]和Hunyuan3d 2.1。NVIDIA还发布了NVIDIA Tensorrt优化版本的流行扩散模型,例如稳定扩散3.5和Flux.1 Kontext作为NVIDIA NIM微服务,使用户可以在Comfyui中运行这些模型,最高3倍,而VRAM少50%。

另外,更新

NVIDIA RTX混音一个平台,可以使Modders Remaster Classic Games今天推出,并添加了一个先进的路径跟踪粒子系统,可提供令人惊叹的视觉效果,以将新的生命注入经典标题。comfyui v3.57获得了RTX的性能提升

NVIDIA与Comfyui合作,将AI模型性能提高了40%。

从角度来看,GPU生成升级通常仅提供20-30%的性能提升。

用Intel Core i9 14900k的GeForce RTX 5090测量。所有型号在1024 1024分辨率上使用20个步骤在Comfyui上运行。

有兴趣优化在应用程序上扩散模型的性能和效率的开发人员可以阅读更多有关NVIDIA如何帮助加速这些工作负载的信息。开发人员论坛

最先进的AI模型,由RTX加速

在过去的几周中发布了令人难以置信的AI内容创建模型,所有这些模型现在都在Comfyui中使用。

WAN 2.2是一种新的视频模型,可为PC上的视频生成提供令人难以置信的质量和控制。这是来自Wan ai``一个创意的AI平台,提供令人印象深刻的AI模型阵容,包括文本到图像,文本到视频,视频到视频的语音。GEFORCE RTX和NVIDIA RTX PRO GPU是唯一能够在Comfyui中运行WAN 2.2 14B型号的GPU,而无需大量输出延迟。查看下面用单个提示创建的示例:一个机器人正在破裂鸡蛋,但不小心将其撞到碗外。”

QWEN图像是阿里巴巴的新图像生成基础模型,在复杂的文本渲染和精确的图像编辑中取得了重大进展。它擅长渲染复杂文本,处理复杂的编辑并维护生成图像中的语义和视觉准确性。与Apple M3 Ultra相比,该型号在GeForce RTX 5090上快7倍。

Qwen-图像在跨多种语言以及图像生成的文本生成中出色。

黑森林实验室新Flux.1 krea [dev]AI模型是Krea 1的开放式版本,提供了强大的性能,并受过训练,可以产生更现实的,多样化的图像,这些图像不包含过饱和纹理。黑森林实验室称该模型为有见识,因为它提供了各种各样的视觉上有趣的图像。与Apple M3 Ultra相比,该型号在GEFORCE RTX 5090上快速运行8倍。

黑森林实验室的新磁带。1Krea[dev]模型提供了更现实,多样的图像。

Hunyuan3d 2.1是一种完全开源的,可提供生产的3D生成系统,可将输入图像或文本转换为富含基于物理渲染材料的高保真3D资产。核心组件包括用于形状生成的33亿参数模型和用于纹理分析的200亿个参数模型,以快速生成更真实的材料。这一切都在Blackwell RTX GPU上运行得更快。

使用Hunyuan3d 2.1快速从图像到3D模型。

开始使用高级视觉生成技术

视觉生成的AI是一种强大的工具,但是即使对于技术专家来说,入门也很困难,并且学习使用更先进的技术通常需要几个月。

Comfyui可以轻松从高级工作流中开始,通过提供模板或预设可以完成特定任务的节点,例如在不同世代保持角色稳定,调整图像的光或加载微调。这即使是非技术艺术家也可以轻松地使用高级AI工作流程。

这是从生成AI开始的10个关键技术:

  • 通过定义开始框架和终端框架来指导视频生成:上传一个启动和终点,以及视频剪辑应该如何开始和结束。然后,WAN 2.2可以生成平滑,动画的过渡,从而填充内置框架以创建一个连贯的动画。它是制作动画,场景变化或定义姿势的理想选择。
  • 用自然语言编辑图像:使用Flux.1 [dev] Kontext编辑图像的特定文本部分。
  • 高档图像或视频:以较低的分辨率进行图像或视频,并通过添加现实的高频细节来提高其分辨率和细节质量。
  • 控制aREA组成:通过控制图像特定区域内的视觉元素的布置和布局,假设对图像生成的颗粒状控制。
  • Restyle图像: 使用通量redux在保留核心视觉元素和细节的同时,创建不同的图像变化。
  • 轻敲 图像到媒体到3D模型:使用从不同角度捕获的对象的多个图像来创建高保真,纹理3D模型。
  • 变换声音为视频:直接从音频输入(例如语音,音乐或环境声音)创建视频剪辑或动画。
  • 控制视频轨迹:自动指导视频中对象,相机或场景的运动。
  • 用介入编辑图像:以视觉上无缝的,上下文一致的方式填充或改变数字图像的缺失或不需要的部分。
  • 用支出扩展画布:生成新的图像内容以扩展现有图像或视频录像的边界,为裁剪部分添加细节或完成场景。

关注Comfyuix有关创意模板和工作流程的更新。

扩展您的comfyui区域

COMFYUI插件使用户能够将生成的AI工作流添加到其现有应用程序中。Comfyui社区已开始为一些流行的创意应用程序构建插件。这

Adobe Photoshop插件通过允许用户运行自己的流量并为特定任务选择专门模型,从而补充了Photoshop的本地萤火虫模型。本地推断还可以使无限的生成填充延迟。

搅拌器插件NVIDIA AI蓝图,用于3D引导的生成AI允许用户连接2D和3D工作流。艺术家可以使用3D场景来控制图像世代或在comfyui中创建纹理,并将其应用于单独的3D资产。

Foundry Nuke插件与搅拌机类似,可以在2D和3D工作流程之间建立连接,因此用户不必在应用程序之间进行alt-tab和交换。

虚幻的引擎插件直接在Unreal Engine用户界面中启用Comfyui节点,以快速创建并使用生成扩散模型为场景创建纹理。请参见下面的示例。

在comfyui中运行NVIDIA RTX GPU的超优化模型

使用NVIDIA RTX GPU的最佳方法是张力图书馆 - 一种高性能的深度学习推理引擎,旨在从NVIDIA RTX GPU中挤出最大速度。

NVIDIA已与顶级AI实验室合作,以将张力集成在其模型中,例如黑森林实验室模型稳定性AI模型。这些模型也可以量化 - 网络的压缩版本使用的VRAM少50-70%,并且在保持相似质量的同时提供的推断速度最高2倍。

张力优化的模型可以直接在Comfyui中运行Tensorrt节点,目前支持SDXL,SD3和SD3.5,以及Flux.1-DEV和Flux.1-SCHNELL模型。该节点将AI模型转换为张力优化的模型,然后为用户的gpu生成了张力优化的引擎,该地图如何以最佳的效率为其特定的硬件执行该模型,以提供大量的加速。

但是,量化模型需要更多的工作。对于有兴趣运行量化和张力优化模型的用户,NVIDIA在一个名为NIM Microservice的简单容器中提供了预配置的文件。用户可以使用NIM节点在comfyui中加载这些容器,并使用量等的模型版本Flux.1-dev,,,,Flux.1-Schnell,,,,Flux.1 Kontext,,,,SD3.5大Microsoft Trellis

混音更新添加了一个路径跟踪的粒子系统

今天通过NVIDIA应用,添加一个先进的粒子系统,该系统使Modders能够增强传统的火灾和烟雾效果,以及更梦幻般的效果,例如视频游戏中的效果门户网站

有了RTX混音,经典游戏中的旧粒子可以解释为路径追踪,从而使它们能够铸造逼真的光线以增强许多场景的外观。但最终,这些颗粒仍然超过20年,缺乏细节,天赋和流体动画。

RTX混音的新粒子具有物理上准确的特性,并且可以与游戏的照明和其他效果相互作用。这使颗粒能够碰撞,准确地响应风和其他力,反映在表面上,铸造阴影并分配自己的阴影。

有关新粒子系统的完整故障,请阅读Geforce文章

每个星期,RTX AI车库 博客系列具有社区驱动的AI创新和内容,以了解有关NVIDIA NIM微服务和AI蓝图以及构建的人的更多信息人工智能代理,创意工作流程,生产力应用以及在AI PC和工作站上的更多信息。 

插入NVIDIA AI PCFacebook,,,,Instagram,,,,蒂克托克x并通过订阅RTX AI PC新闻通讯。加入NVIDIASDiscord服务器与社区开发人员和AI爱好者建立联系,讨论与RTX AI的可能性。

关注NVIDIA工作站LinkedInx。一个 

注意关于软件产品信息。

关于《开始使用comfyui和nvidia rtx ai PC的生成AI来创建内容》的评论


暂无评论

发表评论

摘要

Comfyui是一种用于生成AI工作流的开源图形接口,已发布更新,包括NVIDIA RTX GPU的性能提高高达40%,并支持WAN 2.2,Qwen-Image,Flux.1 krea [dev]和Hunyuan3d 2.1等新型号。此外,NVIDIA推出了流行扩散模型的张力优化版本作为NIM微服务,从而可以更快地在Comfyui中执行VRAM的使用速度。RTX混音还通过高级路径迹线粒子系统进行了更新,以增强经典游戏中的视觉效果。comfyui