SIGGRAPH特别演讲:NVIDIA首席执行官将生成式人工智能带到洛杉矶展会

SIGGRAPH特别演讲:NVIDIA首席执行官在洛杉矶展会上展示生成式人工智能

随着生成式人工智能在日益数字化、超连接的世界中持续席卷,NVIDIA创始人兼首席执行官黄仁勋在世界顶级计算机图形学会议SIGGRAPH上重磅回归。

“生成式人工智能时代已经来临,这可以说是iPhone时刻,”黄仁勋在洛杉矶的现场特别演讲中告诉数千名观众。

新闻亮点包括下一代GH200 Grace Hopper超级芯片平台、NVIDIA AI Workbench(一种新的统一工具包,简化了在NVIDIA AI平台上进行模型调优和部署)以及NVIDIA Omniverse的重大升级,该升级具备生成式人工智能和OpenUSD功能。

这些公告旨在将过去十年的所有创新——人工智能、虚拟世界、加速、模拟、协作等等——汇聚在一起。

“图形和人工智能是密不可分的,图形需要人工智能,人工智能需要图形,”黄仁勋解释道,人工智能将在虚拟世界中学习技能,而人工智能将帮助创造虚拟世界。

NVIDIA创始人兼首席执行官黄仁勋在SIGGRAPH专业图形会议上的主题演讲吸引了座无虚席的观众。

对于人工智能而言,实时图形至关重要

在五年前的SIGGRAPH上,NVIDIA通过将人工智能和实时光线追踪引入GPU,重新定义了图形学。但是“当我们通过人工智能重新定义计算机图形时,我们也在重新定义GPU,使其适用于人工智能,”黄仁勋说。

结果就是越来越强大的系统,如NVIDIA HGX H100,它利用了八个GPU和总共1万亿个晶体管,相比基于CPU的系统具有显著的加速效果。

“这就是为什么全球数据中心正在迅速转向加速计算的原因,”黄仁勋告诉观众。“你买得越多,你就能节省得越多。”

为了继续推动人工智能的发展势头,NVIDIA推出了Grace Hopper超级芯片,即NVIDIA GH200,它将72核Grace CPU与Hopper GPU相结合,并于今年5月开始全面生产。

黄仁勋宣布,已经开始生产的NVIDIA GH200将配备最新的HBM3e内存,并推出另一个版本。

他随后宣布了下一代GH200 Grace Hopper超级芯片平台,具备连接多个GPU以实现卓越性能和易于扩展的服务器设计的能力。

新平台可处理世界上最复杂的生成工作负载,包括大型语言模型、推荐系统和向量数据库,并提供多种配置选项。

双配置可以提供比当前一代产品多3.5倍的内存容量和3倍的带宽,包括一个单服务器,拥有144个Arm Neoverse核心、八个拍卖级AI性能和282GB最新的HBM3e内存技术。

预计领先的系统制造商将于2024年第二季度推出基于该平台的系统。

NVIDIA AI Workbench加速定制生成式人工智能的应用

为了加速世界各大企业对生成式人工智能的定制应用,黄仁勋宣布推出NVIDIA AI Workbench。它为开发人员提供了一个统一、易于使用的工具包,可以快速在个人电脑或工作站上创建、测试和微调生成式人工智能模型,然后将其扩展到几乎任何数据中心、公共云或NVIDIA DGX Cloud。

AI Workbench消除了开始进行企业级人工智能项目的复杂性。通过在本地系统上运行的简化界面访问,开发人员可以使用自定义数据从Hugging Face、GitHub和NGC等流行存储库中微调模型。然后可以轻松在多个平台上共享这些模型。

尽管现在已经有数十万个预训练模型可用,但使用许多开源工具进行定制化可能具有挑战性且耗时。

“为了使这种能力民主化,我们必须使其可以在几乎任何地方运行,”黄仁勋说。

通过AI Workbench,开发人员只需点击几下即可定制和运行生成式人工智能。它允许他们将所有必要的企业级模型、框架、软件开发工具包和库集成到一个统一的开发者工作区中。

“每个人都可以做到这一点,”黄仁勋说。

领先的人工智能基础设施提供商,包括戴尔科技、惠普企业、惠普公司、Lambda、联想和超微,都正在积极采用AI Workbench,因为它能够将企业级生成式人工智能能力带到开发人员想要工作的任何地方,包括本地设备。

黄仁勋还宣布了NVIDIA与创业公司Hugging Face的合作伙伴关系,该公司拥有200万用户,将使数百万开发人员能够在构建大型语言模型和其他高级AI应用程序时轻松使用生成式AI超级计算。

开发人员将能够在Hugging Face平台上访问NVIDIA DGX Cloud AI超级计算,以训练和调整高级AI模型。

“这将是一个全新的服务,将全球最大的AI社区与世界上最佳的培训和基础设施相连接,”黄仁勋说。

在一段视频中,黄仁勋展示了AI Workbench和ChatUSD如何将所有内容整合在一起:让用户可以从GeForce RTX 4090笔记本电脑开始一个项目,并在项目变得更加复杂时,无缝地扩展到工作站或数据中心。

使用Jupyter Notebook,用户可以提示模型生成一张Toy Jensen在太空中的图片。当模型提供一个不正确的结果时,因为它从未见过Toy Jensen,用户可以使用8张Toy Jensen的图片对模型进行微调,然后再次提示它以获得正确的结果。

然后,使用AI Workbench,新模型可以部署到企业应用程序中。

新的NVIDIA Enterprise 4.0软件推进AI部署

为了加速生成式AI的采用,NVIDIA宣布了其企业软件套件的最新版本,NVIDIA AI Enterprise 4.0。

NVIDIA AI Enterprise为企业提供了采用生成式AI所需的工具,同时提供了大规模企业部署所需的安全性和API稳定性。

重大Omniverse发布将生成式AI、OpenUSD与工业数字化融合

黄仁勋宣布了NVIDIA Omniverse的重大发布,这是一个基于OpenUSD的开发平台,用于构建、模拟和协作工具和虚拟世界。

他还宣布了NVIDIA对OpenUSD的贡献,OpenUSD是描述、模拟和协作3D工具的框架和通用交换格式。

Omniverse平台的更新包括对Omniverse Kit的改进,该工具用于开发原生的OpenUSD应用程序和扩展,以及对NVIDIA Omniverse Audio2Face基础应用程序和空间计算能力的改进。

Cesium、Convai、Move AI、SideFX Houdini和Wonder Dynamics现在通过OpenUSD连接到Omniverse。

Adobe和NVIDIA在Adobe Substance 3D、生成式AI和OpenUSD项目方面的合作也在扩大,他们宣布计划将Adobe Firefly(Adobe的创意生成式AI模型系列)作为API在Omniverse中提供。

Omniverse用户现在可以构建与ARKit和RealityKit等基于OpenUSD的空间计算平台兼容的内容、体验和应用程序。

黄仁勋宣布了一系列用于加速通用场景描述(OpenUSD)的采用的框架、资源和服务,包括地理空间数据模型、度量装配和用于OpenUSD的模拟准备(SimReady)规范的贡献。


黄仁勋还宣布了NVIDIA为开发人员构建的四个新的Omniverse Cloud API,以更无缝地实施和部署OpenUSD管道和应用程序。

  • ChatUSD – 为使用OpenUSD数据和场景的开发人员和艺术家提供帮助,ChatUSD是一个大型语言模型(LLM)代理,可以从文本生成Python-USD代码脚本,并回答USD相关问题。
  • RunUSD – 一个云API,通过检查上传文件与OpenUSD版本的兼容性,将OpenUSD文件转换为完全路径追踪渲染图像,并使用Omniverse Cloud生成渲染图像。
  • DeepSearch – 一个LLM代理,可以通过大规模未标记资源数据库进行快速语义搜索。
  • USD-GDN Publisher – 一个一键式服务,使企业和软件制造商能够从基于Omniverse的应用程序(如USD Composer)将基于OpenUSD的高保真度体验发布到Omniverse Cloud图形交付网络(GDN),并实时流式传输到Web浏览器和移动设备。

这些贡献是NVIDIA上周与Pixar、Adobe、Apple和Autodesk共同创办的OpenUSD联盟的发展。

强大的新桌面系统和服务器

为了提供更多计算能力,黄仁勋表示,NVIDIA与全球工作站制造商宣布了基于NVIDIA RTX 6000 Ada Generation GPU的强大新RTX工作站,用于生成式AI和数字化时代的开发和内容创作。

这些系统包括来自BOXX、戴尔科技、惠普和联想的系统,它们采用了NVIDIA AI Enterprise和NVIDIA Omniverse Enterprise软件。

与此同时,NVIDIA发布了三款新的台式工作站Ada Generation GPU —— NVIDIA RTX 5000、RTX 4500和RTX 4000,为全球专业人士提供最新的人工智能、图形和实时渲染技术。

Huang还详细介绍了NVIDIA如何与全球数据中心系统制造商合作,通过新的NVIDIA OVX和新的NVIDIA L40S GPU,持续加速生成式人工智能和工业数字化,以实现强大、通用的数据中心处理器设计。

这些强大的新系统将加速最计算密集、复杂的应用程序,包括AI训练和推理、3D设计和可视化、视频处理和工业数字化,以及使用NVIDIA Omniverse平台。

NVIDIA研究带来新的能力

多亏了NVIDIA研究,更多的创新即将到来。

在展会的实时现场活动中,NVIDIA研究人员将展示一种生成式AI工作流程,帮助艺术家快速创建和迭代3D场景的材质,使用文本或图像提示更快地生成定制纹理材质,并具有更精细的创造控制。

NVIDIA研究还演示了如何利用AI将视频会议提升到新的水平,具备新的3D功能。NVIDIA研究最近发表了一篇论文,展示了如何利用AI在最少的捕捉设备下驱动3D视频会议系统。

Maxine的生产版本现已在NVIDIA Enterprise上推出,允许专业人士、团队、创作者和其他人利用AI的力量创建高质量的音频和视频效果,甚至可以使用标准麦克风和网络摄像头。

请在NVIDIA的SIGGRAPH活动网站上观看Huang的完整特别演讲,网站上还有实验室、演示和更多活动的详细信息。