NVIDIA RTX Remix 工具套件将向创作者开源

由 Andrew Burnes 发表于 2024年6月2日 | 精选故事 Computex NVIDIA Omniverse NVIDIA RTX NVIDIA RTX Remix

借助 NVIDIA RTX Remix,Modder 能够通过全景光线追踪、DLSS 3.5、高质量的素材和物理精准的材质重制经典 DirectX 8 和 DirectX 9 游戏。RTX Remix 基于 NVIDIA Omniverse™ 构建,包含一个运行时渲染器和一个工具套件应用,可为游戏素材和材质的 modding 提供帮助。

去年,NVIDIA 开源了 Remix Runtime,让 Modder 能够扩展游戏兼容性提升渲染能力。今年 6 月下旬,NVIDIA 将开源 RTX Remix 工具套件,让 Modder 能够简化替换素材和调整场景光照的方式,增加 Remix 素材提取器支持的文件格式,并通过新模型增强 RTX Remix 的 AI 纹理工具。

此外,NVIDIA 还会添加通过 REST API 使用 Remix 工具套件功能的方式,使 Modder 可以将 RTX Remix 实时链接到其他 DCC 工具 (如 Blender)、Mod 工具 (如 Hammer) 以及生成式 AI 应用 (如 ComfyUI)。NVIDIA 还会为 Remix Runtime 提供 SDK,使 Modder 可以将 RTX Remix 的渲染器部署到 DirectX 8 和 9 经典版之外的其他应用和游戏中。

自我们今年年初推出 RTX Remix 工具套件以来,已有 2 万名 Modder 尝试对超过 130 款与 RTX Remix 兼容的经典游戏进行定制,因此在 RTX Remix Showcase Discord 上可以看到有上百款重制版游戏正在开发中。通过进一步开放 RTX Remix 平台,我们希望能够支持和激励全球的 Modder 制作出更多令人惊叹的 RTX 重制版游戏。

RTX Remix 平台提供开源工具包、Remix Runtime SDK 和 REST API

RTX Remix Rest API 简介

开发者将能够使用 REST API 将 RTX Remix 与其他 DCC 应用连接。当 RTX Remix 工具套件在后台运行时,开发者可以同时在其他应用中利用该套件的各种功能。例如,开发者可以将 Blender 连接到 RTX Remix,并在 Blender 中设计一个按钮,用于立即导入在 RTX Remix 视窗中选择的原始游戏素材。

素材重新设计完毕之后,开发者只需在 Blender 中保存,系统就会使用 RTX Remix REST API 自动执行替换,让这些素材自动出现在游戏中。此外,在 Hammer 等 Mod 工具方面拥有数十年经验的 Modder 可以使用 RTX Remix 建立实时链接,从而用 RTX Remix 的素材替换功能升级 Hammer 的素材替换功能。


为了展示 RTX Remix REST API 的多种功能,我们将 RTX Remix 连接到 ComfyUI 的生成式 AI 生态系统。RTX Remix Modder 将能够下载 RTX Remix ComfyUI 节点,从而显著加快 AI 艺术创作的过程。

 

对于由缺乏艺术经验或时间的 Modder 组成的小型 Mod 团队来说,生成式 AI 可提供莫大帮助。在生成式 AI 的协助下,这些 Modder 能够采用与 RTX Remix 全景光线追踪技术相结合的物理精准材质,以高分辨率重制大量游戏纹理,从而节省时间,专注于手动创建高品质主要资产。对于拥有数十名艺术家的大型团队来说,AI 生成的纹理非常适合用作临时资产,让他们可以在光照条件下手动优化每个资产。

ComfyUI 目前由 GeForce RTX 和 NVIDIA RTX GPU 上的 Tensor Core 加速,可显著加速纹理生成。

NVIDIA TensorRT 可将 ComfyUI 图像生成速度提升 60%,从而在 RTX 上更快地完成 Stable Diffusion 工作流

借助我们的 REST API 集成,您可以导出在 RTX Remix 中纹理的所有游戏纹理,并使用上采样或加入 PBR 技术的 AI 模型批量增强这些纹理。ComfyUI 提供了许多可供选择的超分辨率和 PBR 模型(包含金属度和高度图),可将分辨率提升至 8 倍或更高。此外,Modder 还可以利用 ComfyUI 的文本提示词在纹理中生成新细节,或者通过使用单个文本提示词改变整个场景的外观,大幅转变风格。

Remix 和 ComfyUI 通过 REST API 支持的工作流示例

在 RTX Remix 中选择少量纹理,在 ComfyUI 中输入提示词,然后在游戏中查看该素材的每个实例发生的变化,而无需管理任何文件,这是一种独一无二的体验。

before

ComfyUI 处理的“半条命 2 (Half Life 2)”测试纹理 - 点击加载 4K 全屏对比图

在“传送门 (Portal)”RTX 版的测试场景中,我们能够在六分钟内重制整个游戏中的 8 种纹理,而在传统的 Mod 工具中,这项任务需要数周或数月才能完成。一些 AI 模型运行速度甚至更快,几秒钟内就能生成结果。

before

ComfyUI 处理的“传送门 (Portal)”测试纹理 - 点击加载 4K 全屏对比图

我们希望在 ComfyUI 和 RTX Remix 的 REST API 的协助下,由 AI 赋能的 Remix Mod 能够加快制作过程,美化外观并采用更多视觉风格。

第一张图为原始“传送门 (Portal)”,后两张图是通过 ComfyUI 的文本提示改变纹理风格

立即下载 RTX Remix 测试版

如果您想为经典游戏制作自己的光线追踪 Mod,不妨立即下载 NVIDIA RTX Remix 测试版,并按照此软件中的完整教程视频的指引来完成整个流程。结合了 RTX Remix Rest API 和 ComfyUI 的开源 RTX Remix 工具套件将于 6 月下旬更新。您还可以在 ModDB 上查找最新的 RTX Remix Mod,并访问 NVIDIA Studio,详细了解 RTX 加速软件,例如 Adobe Substance 和 Blender。

我们很期待看到 Modder 和开发者如何在完全开源的 RTX Remix 平台上进行构建,也期待增加适用于该平台的游戏和应用,扩大由这些游戏和应用组成的生态系统。有关未来 RTX Remix 开发的最新动态,敬请持续关注 GeForce.cn。此外,请务必查看我们发布的其他 Computex 2024 公告,了解我们正在如何利用 AI 和 NVIDIA RTX 技术推动游戏和创作领域不断发展。