全新RTX 50 系列助力3D、视频和生成式 AI 的创意性能双倍提升 - TGBUS - 电玩巴士

副标题:在 CES 上发布的 GeForce RTX 50 系列支持 FP4,可提供强大的 AI 性能,并配备多达三个视频编码器,支持 4:2:2 色彩格式。此外,新的 AI 工具可增强直播体验,DLSS 4 可提升 3D 渲染,NVIDIA NIM 微服务和 Blueprints 则为 PC 上的 AI 强效助力。

近日在 CES 展会上亮相的 GeForce RTX 50 系列台式电脑和笔记本电脑 GPU 将为新一代的生成式 AI 和代理式 AI 内容创作提供助力——为视频、直播、3D 等领域带来新的工具和功能。

GeForce RTX 50 系列 GPU 基于 NVIDIA Blackwell 架构,与上一代相比,运行创意生成式 AI 模型的速度可提升至 2 倍,且内存占用更少。该系列 GPU 配备第九代 NVIDIA 视频编码器用于高级视频编辑和直播,并搭载 NVIDIA DLSS 4 和高达 32 GB 的显存,以应对大型 3D 项目。

https://images.nvidia.cn/cn/youtube-replicates/VVWXFHEhWV0.mp4

这些 GPU 伴随多个软件更新,包括两个新的 NVIDIA Broadcast AI 特效、RTX Video 和 RTX Remix 的更新,以及 NVIDIA NIM 微服务——预先打包和优化的模型,旨在促进 RTX AI PC 上的 AI 内容创作工作流。。

为生成式 AI 时代而生

生成式 AI 可以为创作者带来惊人的成果,但随着模型的复杂性和规模不断增长,即使在最新的硬件上,也很难运行生成式 AI。

GeForce RTX 50 系列增加了 FP4 支持,以帮助解决这一问题。FP4 是一种更低精度的量化方法,类似于文件压缩,可以减小模型大小。与大多数模型默认采用的 FP16 方法相比,FP4 的显存占用不到一半,并且 50 系列 GPU 提供的性能是上一代的 2 倍以上。利用 NVIDIA TensorRT Model Optimizer 提供的高级量化方法,可以在几乎没有任何质量损失的情况下实现这一点。

例如,Black Forest Labs 的 FLUX.1 [dev] 模型在 FP16 下需要超过 23 GB 的显存,这意味着它只能由 GeForce RTX 4090 D 和专业 GPU 提供支持。在 FP4 下,FLUX.1 [dev] 仅需要不到 10 GB 显存,因此可以在更多 GeForce RTX GPU 上本地运行。

在 GeForce RTX 4090 D 上采用 FP16 时,FLUX.1 [dev] 模型可以在 18 秒内生成图像,步数为 30 步。而在 GeForce RTX 5090 D 上采用 FP4,只需五秒的时间即可生成图像。

一个基于 FLUX.1 [dev]、面向 3D 引导生成式 AI 的全新 NVIDIA AI Blueprint 将作为一项 NVIDIA NIM 微服务提供,让艺术家能够更好地控制文本生成图像。有了这个蓝图,创作者可以使用由手工创建或 AI 生成的简单 3D 模型,并将它们放在 Blender 等 3D 渲染器中引导 AI 图像生成。由 FLUX NIM 微服务,ComfyUI 和 ACGGit 开发的 Blender 插件提供支持的预打包工作流随后可以生成与 3D 场景构图相匹配的高质量图像。

该由 3D 引导的生成式 AI 的 NVIDIA Blueprint 预计将于 2 月通过 GitHub 以一键安装程序的形式提供。

https://images.nvidia.cn/cn/youtube-replicates/6YrEjhSMPBY.mp4

Stability AI 宣布其 Stable Point Aware 3D(简称 SPAR3D)模型将于本月在 RTX AI PC 上推出。得益于 RTX 加速,Stability AI 的新模型将有助于革新 3D 设计,提供对 3D 内容的卓越掌控,支持实时编辑并能够在不到一秒的时间内从单个图像生成 3D 物体。

让每个人都能制作专业级视频

GeForce RTX 50 系列 GPU 实现了 NVIDIA 视频编码器和解码器的代际飞跃,支持 4:2:2 专业级色彩格式、用于 3D 和虚拟现实 (VR) 视频的多视图 HEVC (MV-HEVC) 以及全新的 AV1 超高质量(UHQ)模式。

大多数消费级相机局限于 4:2:0 色彩压缩,这会减少色彩信息量。4:2:0 通常足以用于浏览器上的视频播放,但无法提供专业视频创作者对视频进行调色所需的色彩深度。4:2:2 格式提供双倍的色彩信息,而原始文件大小仅为原来的1.3 倍,为视频编辑工作流带来了理想的平衡。

https://images.nvidia.cn/cn/youtube-replicates/z4A1G0g41Gk.mp4

由于文件大小增加,解码 4:2:2 视频可能具有挑战性。GeForce RTX 50 系列 GPU 包括 4:2:2 硬件解码支持,每个解码器可解码多达 8 条4K 60 fps视频源,实现流畅的多机位视频编辑。

GeForce RTX 5090 D GPU 配备三个视频编码器和两个视频解码器,GeForce RTX 5080 GPU 包括两个视频编码器和两个视频解码器,5070 Ti GPU 具有两个视频编码器和一个视频解码器,GeForce RTX 5070 GPU 则包括一个视频编码器和一个视频解码器。这些多编码器和解码器配置与更快的 GPU 相结合,使 GeForce RTX 5090 D 的视频导出速度比 GeForce RTX 4090 D  快 60%,是 GeForce RTX 3090 的 4 倍。

GeForce RTX 50 系列 GPU 还搭载第九代 NVIDIA 视频编码器 NVENC,可将 HEVC 和 AV1 编码 (BD-BR) 的视频质量提高 5%,还支持全新的 AV1 超高质量(UHQ) 模式,在相同质量下实现 5% 的压缩率提升。这些 GPU 还包含第六代 NVIDIA 视频解码器,可将 H.264 视频的解码速度翻倍。

从 2 月开始,NVIDIA 将与剪映专业版、万兴喵影、Adobe Premiere Pro和Blackmagic Design 合作,支持这些技术。

随着 VR、AR和混合现实头显设备的发展,3D 视频逐渐开始流行。全新的 RTX 50 系列 GPU 还支持 MV-HEVC 编解码器,以便在不久的将来解锁此类格式。

直播增强

直播需要同时兼顾多项任务,主播需要在玩游戏的同时制作视频节目并保证娱乐效果。头部主播可以聘用制作人和助播来分担工作量,但大多数主播需独自承担诸多工作,且长时间持续工作。现在,这一状况即将改变。

Streamlabs,罗技旗下的一个品牌,也是面向内容创作者的直播软件和工具的领先提供商,正在与 NVIDIA 和 Inworld AI 合作打造 Streamlabs 智能直播助手。

Streamlabs 智能直播助手是一个 AI 智能体,可以扮演助理、制作人和技术支持的角色。智能助手可以化身 3D 虚拟形象加入直播,回答问题、评论游戏玩法或聊天,或发起暖场对话。它可以辅助制作直播内容,在有意思的游戏时刻切换到最相关的场景并播放音频和视频提示。它甚至可以作为 IT 助手,帮助配置直播并解决问题。

Streamlabs 智能直播助手由 NVIDIA ACE 技术(用于创建数字人)和 Inworld AI(用于实现代理式 AI 体验的 AI 框架)提供支持。该助手将于今年晚些时候推出。

数百万用户已使用 NVIDIA Broadcast 应用程序将办公室和宿舍变为家庭工作室,通过使用 AI 功能提高音频和视频质量,而无需昂贵的专用设备。

两个新的 AI 赋能的测试版特效将添加到 NVIDIA Broadcast 应用程序中。

第一个是 Studio Voice 音棚音效,它可以增强用户麦克风的声音,使其与高品质麦克风相媲美。。另一个是 Virtual Key Light 虚拟补光,可以重新照亮用户的面部,使光线均匀分布,营造出如同两盏灯充分照亮的效果。

由于这两个测试版功能使用了性能要求较高的 AI 模型,因此建议用于视频会议或非游戏直播,并使用 GeForce RTX 5080 GPU 或更高级别的 GPU。NVIDIA 正力求在未来的更新中将这些功能扩展到更多 GeForce RTX GPU。

NVIDIA Broadcast 应用升级还包括全新的用户界面,允许用户同时启用更多效果,以及对噪音消除、虚拟背景和目光接触效果的改进。

更新后的 NVIDIA Broadcast 应用程序将于 2 月推出。

https://images.nvidia.cn/cn/youtube-replicates/-PThMLe6UgY.mp4

主播同样可以受益于 NVENC——在 OBS 的 Twitch 增强直播功能的最新测试版中,HEVC 和 AV1 的 BD-BR 视频质量提升了 5%,并且用于在 Discord 或 YouTube 中直播的 AV1 编码器也有所改进。

RTX Video 是一个 AI 功能,可通过视频超分辨率(VSR)和 HDR 增强 Google Chrome 和 Microsoft Edge 等常用互联网浏览器,以及本地播放器的视频播放效果。该功能将获得更新,可将 GPU 的使用率降低 30%,从而扩大能够以更高质量运行视频超分辨率的 GeForce RTX GPU 阵容。

RTX Video 更新将在未来的 NVIDIA App 版本中提供。

前所未有的 3D 渲染性能

GeForce RTX 5090 D GPU 提供 32 GB GPU 显存,是历代 GeForce RTX GPU 中显存最大的型号,比 GeForce RTX 4090  D GPU 提升了 33 %。这使得 3D 艺术家能够在同时使用多个应用程序的同时,构建更大、更丰富的世界。此外,全新的 RTX 50 系列第四代 RT Cores 可以将 3D 应用程序的运行速度提升 40%。

DLSS 4 首次引入多帧生成功能,使用 AI 为每个渲染帧生成最多三帧来提高帧率。这使得动画师能够以多达 4 倍的帧数流畅地操作场景,或以 60 fps 或更高帧率渲染 3D 内容。

https://images.nvidia.cn/cn/youtube-replicates/qQn3bsPNTyI.mp4

D5 渲染器和 Chaos Vantage 这两款深受建筑师和设计师欢迎的专业级 3D 应用程序将于 2 月增加对 DLSS 4 的支持。

3D 艺术家们已采用生成式 AI 来提高生成 3D 网格模型、HDRi 地图甚至动画的效率,以进行场景原型设计。在 CES 上,Stability AI 宣布了全新的 3D 模型 SPAR3D,它可以在 RTX 加速的支持下在几秒钟内根据图像生成 3D 网格模型。

NVIDIA RTX Remix 是一个 MOD 平台,允许 MOD 制作者捕捉游戏资产,利用生成式 AI 工具自动增强材质,并加持全景光线追踪来创建令人惊艳的 RTX 重制版——支持 DLSS 4,提升图形保真度和帧率,最大限度地提高游戏过程中的真实感和沉浸感。

RTX Remix 将支持 Neural Radiance Cache,这是一种使用 AI 对实时游戏数据进行训练并精确估计每像素间接光照的神经着色器。借助 RTX Skin,RTX Remix MOD 有望为角色带来前所未有的逼真度,因为光线将通过角色的皮肤反射和传播,使其与周围环境更为融合。借助 RTX Skin,RTX Remix MOD 有望为角色带来前所未有的逼真度,因为光线将通过角色的皮肤反射和传播,使其与所处的世界更为融合。

GeForce RTX 5090 D 和 5080 GPU 将于 1 月 30 日开始发售,随后 GeForce RTX 5070 Ti 和 5070 GPU 将于 2 月推出,RTX 50 系列笔记本电脑将于 3 月上市。

所有配备 GeForce RTX GPU 的系统,均可体验 NVIDIA Studio 平台带来的优化,包括 130 多个 经 GPU 加速的内容创作应用,以及经过广泛测试并每月更新的 NVIDIA Studio 驱动,该驱动可为用户增强热门创意应用程序的性能并最大限度地提高其稳定性。

敬请关注 GeForce RTX 50 系列的更多更新。详细了解 GeForce RTX 50 系列如何增强游戏体验,并查看 NVIDIA 在 CES 上的所有发布内容。

每月,NVIDIA Studio 平台为创意应用程序更新和优化提供支持。

请参阅有关软件产品信息的声明。

声明：本站转载此文目的在于传递更多信息，并不代表赞同其观点和对其真实性负责。如涉及作品内容、版权和其它问题，请在30日内与本站联系，我们将在第一时间删除内容，本站对此声明具有最终解释权。