“在NVIDIA Studio中进行内容创作,得益于新的专业GPU、AI工具、Omniverse和OpenUSD合作功能的增强”

Content creation in NVIDIA Studio benefits from enhanced professional GPUs, AI tools, Omniverse, and OpenUSD collaboration features.

人工智能和加速计算成为SIGGRAPH的焦点——该活动是全球最大的计算机图形专家聚集地——NVIDIA创始人兼首席执行官黄仁勋在他的主题演讲中宣布了对NVIDIA Omniverse的更新,这是一个用于构建和连接3D工具和应用程序的平台,以及用于Universal Scene Description(即OpenUSD)的加速,OpenUSD是一个开放和可扩展的3D世界生态系统。

这是继最近NVIDIA宣布与Pixar、Adobe、Apple和Autodesk共同组建Alliance for OpenUSD后的又一项重大举措。这标志着在3D工具和内容的数字化过程中,各行各业的3D图形、设计和模拟将迈向下一个时代。

NVIDIA推出了三款新的台式工作站Ada Generation GPU——NVIDIA RTX 5000、RTX 4500和RTX 4000——为全球的专业人士提供了最新的人工智能、图形和实时渲染技术。

Shutterstock将基于NVIDIA Picasso的生成式人工智能引入到3D场景背景中,Picasso是一个基于云的铸造厂,用于构建视觉生成式人工智能模型。经过Picasso训练的模型现在可以为快速场景开发生成逼真的、8K、360度高动态范围成像(HDRi)环境贴图。Autodesk还将使用Picasso中的基础模型开发的生成式人工智能内容创作服务与其流行的Autodesk Maya软件集成。

每个月,NVIDIA Studio Driver的发布为艺术家、创作者和3D开发人员提供了在使用创意应用程序时最佳的性能和可靠性。现在可用的8月NVIDIA Studio Driver为创作者提供了使用他们喜爱的创意应用程序的最高可靠性。它包括对Omniverse、XSplit Broadcaster和Reallusion iClone的更新支持。

此外,本周在NVIDIA Studio艺术家Andrew Averkin的作品中,他展示了人工智能如何影响他在为他的《自然咖啡》作品建立一个令人愉悦的咖啡杯的过程。

Omniverse扩展

Omniverse进行了重大升级,为平台带来了新的连接器和进展。

这些更新在Omniverse基础应用程序中展示,这些应用程序是完全可定制的参考应用程序,创作者、企业和开发人员可以复制、扩展或增强。

升级后的Omniverse应用程序包括Omniverse USD Composer,它允许3D用户组装基于OpenUSD的大规模场景。Omniverse Audio2Face现在包括多语言支持和一个新的女性基础模型,该模型提供生成式人工智能应用程序编程接口,从仅有一个音频文件中创建逼真的面部动画和手势。

此次更新提高了效率并改善了用户体验。新的渲染优化充分利用了NVIDIA Ada Lovelace架构在NVIDIA RTX GPU中的增强,DLSS 3技术完全集成到Omniverse RTX渲染器中。此外,新的人工智能去噪器使得可以实时对大型工业场景进行4K路径追踪。

新的应用程序和体验模板为刚开始使用OpenUSD和Omniverse的开发人员提供了一个重大的起点,几乎不需要编码。

一个新的Omniverse Kit Extension Registry是一个中央存储库,用于访问、共享和管理Omniverse扩展,让开发人员可以轻松地在他们的应用程序中启用和禁用功能,从而更容易地构建自定义应用程序,这些应用程序可以使用NVIDIA提供的500多个核心Omniverse扩展。

新的扩展现实开发人员工具让用户可以将空间计算选项原生地构建到基于Omniverse的应用程序中,使用户可以灵活地体验他们的3D项目和虚拟世界。

Adobe和NVIDIA在Adobe Substance 3D、生成式人工智能和OpenUSD计划方面的合作进一步扩展,宣布计划将Adobe Firefly,Adobe的创意生成式人工智能模型系列,作为API提供在Omniverse中,使开发人员和创作者能够增强他们的设计流程。

开发人员和工业企业有了新的基础应用程序和服务,可以通过OpenUSD框架和生成式人工智能来优化和增强3D流程。

工作室专业人员可以将生成式人工智能世界与他们的工作流程连接起来,加速整个项目——从环境创建和角色动画到场景设置等。借助Kit AI Agent、OpenUSD Connectors和引导顶级生成式人工智能工具和API的扩展,Omniverse可以将最终结果聚合到一个统一的视口中,从而大大缩短从构思到创作的时间。

RTX:下一代

新的NVIDIA RTX 5000、RTX 4500和RTX 4000 Ada Generation专业台式工作站GPU采用了最新的NVIDIA Ada Lovelace架构技术,包括DLSS 3,可在3D应用程序(如虚幻引擎)中实现更流畅的渲染和实时交互。

这些工作站级GPU配备了第三代RT核心,吞吐量比上一代提高了2倍。这使用户可以实时处理更大、更高保真度的图像,帮助艺术家和设计师保持他们的创作流程。

第四代张量核心提供了比上一代高达2倍的人工智能性能,可用于人工智能训练、开发、推断和生成式人工智能工作负载。大容量的GPU内存使得最新的生成式人工智能工具和应用程序能够支持AI辅助的多应用工作流。

Ada架构为这些新型GPU提供了比上一代高达两倍的视频编码和解码能力,在实时编码最高8K60视频的同时支持AV1编码和解码。结合下一代人工智能性能,这些功能使得新一代专业GPU非常适合多流视频编辑工作流,可以使用Adobe Premiere和DaVinci Resolve等AI辅助视频编辑应用程序处理高分辨率内容。

这些新型GPU专为需要大型模型和数据集的高端创意、多应用专业工作流而设计,提供大容量的GDDR6内存:RTX 4000为20GB,RTX 4500为24GB,RTX 5000为32GB —— 所有型号都支持纠错码以实现无误差计算。

现代版毕加索

3D艺术家经常面临将场景通过艺术的方式结合英雄资产、道具、材料、背景和光照带入生活的巨大任务。生成式人工智能技术可以通过生成次要资产(例如照亮场景的环境贴图)来简化这个工作流程。

在SIGGRAPH上,Shutterstock宣布利用NVIDIA Picasso训练生成式人工智能模型,用于创建360度HDRi逼真环境贴图。该模型是使用Shutterstock的合法授权库构建的。

Shutterstock使用NVIDIA Picasso创建360度HDRi逼真环境贴图。

以前,艺术家需要使用昂贵的360度摄像机从头开始创建背景和环境贴图,或者从固定选项中选择,这些选项可能与他们的3D场景不完全匹配。现在,通过简单的提示或使用他们所需的背景作为参考,Shutterstock的生成式人工智能功能将快速生成自定义的360度、8K分辨率、HDRi环境贴图,艺术家可以用它们来设置背景和照明场景。这样可以为主要的3D资产(即观众关注的主要资产)节省更多的工作时间。

Autodesk还宣布将使用在Picasso中使用基础模型开发的生成式人工智能内容创作服务与其流行的3D软件Autodesk Maya集成。

使用基础模型在Picasso中开发的Autodesk Maya生成式人工智能内容创作服务。

August Studio Driver提供以下功能

August Studio Driver支持这些更新以及更多功能,包括最新版本的流媒体软件XSplit Broadcaster,该软件可以让用户同时在多个平台上进行流媒体。

XSplit Broadcaster 4.5引入了NVIDIA编码器(NVENC)AV1支持。GeForce和NVIDIA RTX 40系列GPU用户现在可以直接向YouTube Live高质量地以4K 60帧每秒的速度进行流媒体,从而显著提高视频质量。

XSplit Broadcaster 4.5增加了对YouTube的AV1直播支持。

使用RTX GPU进行AV1流媒体可以比H.264提供更高效率的40%减少带宽要求,从而降低流媒体的带宽占用或者减小高质量本地捕获的文件大小。

H.264 vs. AV1: 以8 Mbps编码的4K60源。

Reallusion iClone Omniverse Connector的更新包括实时项目同步和对OpenUSD的增强导入功能等新功能。这使得iClone和Omniverse之间的工作更快、更平滑、更高效。

美味的艺术品

无法用言语描述令人叫绝的3D场景“Natural Coffee”。

他们接受预订吗?

NVIDIA艺术家Andrew Averkin在创意领域有超过15年的经验。他在持续的旅程中找到了乐趣,将艺术与技术融合,将他的生动想象力变为现实。

他的作品《天然咖啡》有一个引人入胜的起源故事。从前,在一个繁忙的办公室里,有一杯以其传奇力量而闻名的“天然咖啡”。它使艺术家工作时充满勇气,全面提高表现,并且还额外提供了神奇的音乐疗法。

Averkin使用图像生成器快速循环播放从简单的文本提示创建的视觉创意。使用人工智能在创意工作流程开始时进行图像构思在艺术家中越来越受欢迎,以节省迭代时间。

Averkin为灵感进行迭代。

有了视觉基础,Averkin通过从在线商店获取3D资产,快速构建场景的3D模型,即使用简单的3D形状构建的粗糙草图级别,没有细节或精细的细节。

接下来,Averkin在Autodesk 3ds Max中精细调整单个资产,雕刻带有精细细节的模型,测试并应用不同的纹理和材质。他的GeForce RTX 4090 GPU通过默认的Autodesk Arnold渲染器解锁了RTX加速的AI去噪声功能,提供了交互式的3D建模,这在构图过程中非常有帮助。

Averkin在Autodesk 3ds Max中工作。

“我选择了一款GeForce RTX显卡,因为它质量好、速度快、安全可靠,简而言之,”Averkin说。

然后,Averkin通过Autodesk 3ds Max Connector将《天然咖啡》导出到NVIDIA Omniverse USD Composer应用程序中。“在USD Composer中,我添加了更多细节,大量使用了内置的材料集合,并通过大量灯光工作使构图看起来更加逼真,”他解释道。

在Omniverse USD Composer中实时渲染。

Omniverse USD Composer中最大的好处之一是能够实时查看具有照片级光照、阴影、纹理等的场景。这极大地改善了编辑大型3D场景的过程,使其更快速、更容易。Averkin甚至能够添加一个相机飞行动画,进一步提升了场景。

最后一步是在Adobe Photoshop中进行一些修饰。超过30个GPU加速的功能为Averkin提供了丰富的选项,可以玩弄颜色和对比度,并且可以平滑快速地进行最终的图像调整。

Averkin鼓励高级3D艺术家尝试OpenUSD框架。“我在NVIDIA的工作和个人项目中经常使用它,”他说。“OpenUSD非常强大。它以非破坏性的方式在多个创意应用程序中帮助工作,并且其他出色的功能使整个过程更加简便和灵活。”

NVIDIA艺术家Andrew Averkin。

在ArtStation上查看Averkin的作品集。

关注NVIDIA Studio的Instagram、Twitter和Facebook。在Studio YouTube频道上获取教程,并通过订阅Studio通讯直接在您的收件箱中获取更新。