英伟达生态新动作，瞄准工业赛道

春江水暖鸭先知。目前NVIDIA的动作正在显示出一些新的趋势。

不久前，NVIDIA(英伟达)为3D建模发布了生成AI服务，引起了业界的广泛关注。如果说之前的生成AI更多的是生成二维世界的内容，比如文字、照片、视频等。那么，NVIDIA正在通过生成AI帮助企业建立3D资产，加快数字孪生和模拟产业的发展，加快AI在物理世界的应用。

01 目标是“CUDA原生”

春江水暖鸭先知。NVIDIA作为全球加速计算的领导者，正在展示一些新的趋势。

在2024年SIGGRAPH的两次围炉对话中，NVIDIA创始人兼CEO黄仁勋将其对AI的最新洞察融入了生成式AI和加速计算，以及如何通过可视化改变制造业等领域。NVIDIA还在会议期间推出了一套全新的NIM微服务。

SIGGRAPH大会是讨论计算机图形学最新创新的地方。NVIDIA发布了OpenUSDDIA的应用。、生成式AI模型和NIM微服务，如几何、物理和材料。OpenUSD是三维场景中数据交换的开源软件，已经逐渐成为三维视觉、建筑、设计、制造等许多行业的标准。

借助于这些模型和服务，开发者可以加快制造、汽车、机器人等应用领域的研发。

在两次围炉谈话中，黄仁勋讨论了构建数字孪生和虚拟世界的重要性。他说，行业可以通过建立城市规模的大规模数字孪生来提高效率，降低成本。“例如，AI可以在这个虚拟世界中练习，然后部署到下一代人形机器人。”

为什么黄仁勋会专注于工业可视化、虚拟世界或数字孪生？为什么NVIDIA在CUDA生态中推出了全新的NIM微服务？

来自NVIDIA官网的图片

例如NVIDIA ReveverseOmniverse和模拟技术副总裁 Lebaredian所说的——工业生成AI潮已经到来。数智一线也了解到，生成AI正从一些简单的场景走向复杂的生产环节。上述技术生态可以加速这一过程。

现在，借助NVIDIAIAIA，数字世界的主要客户仍然是创意产业； NIM微服务可以为OpenUSD带来增强功能和可访问性，各行各业都可以创造基于物理的虚拟世界和数字孪生，为新一轮AI技术热潮做好充分准备。Rev Lebaredian说。

国内汽车企业在汽车行业“卷”数字孪生。特斯拉最近即将发布FSD12.5版本，同时也在积极推动FSD在中国的落地。”一位中国大型汽车公司的人工智能人士告诉数字智能前线，“特斯拉把模拟作为一个战略目标，我们也在做元宇宙，处理自动驾驶数据的闭环问题。在此之前，汽车公司很难收集到“鬼探头”的数据，而且成本很高。现在，汽车公司可以在元宇宙模拟环境中，对长尾场景进行实践。

在机器人行业，一家电力检测机器人公司正在通过模拟环境对AI进行培训，让机器人能够实时感知电厂内复杂的环境和物理空间，规划移动路线，在不同的设备上查看成千上万的表格。

建筑设计是一项复杂耗时的工作，建筑设计中的3D模型是不可或缺的交付部件。然而，3D模型很难重建一些复杂的几何结构和异形结构。如今，一些设计企业和AI公司一起，尝试只需要一些图片、草图和文字就能生成模型。它还可以赋予建筑设计不同的材料来改进设计。

在钢铁企业中，金相分析是一种通过显微镜检查材料切片内部缺陷和结构的方法，从而了解基础材料的综合性能。传统劳动力效率低下，严重依赖人的经验。如今，许多钢铁企业的共同要求是，他们希望利用过去的知识库，通过训练专业的AI来全面分析材料。

通过全新的NIM微服务，NVIDIA使得应用公司能够快速实现一个应用程序，而无需从零开始，直接调用服务，并结合自己的数据。因此，一些企业将其描述为“CUDA原生”。

黄仁勋表示，随着生成式AI从一些边缘场景到更深层次场景的落地，“每个人都会有AI助手”。与此同时，AI与图像技术的结合也在深化。“几乎每个行业都会受到这项技术的影响。黄仁勋说:“生成式AI将彻底改变机器人无人驾驶汽车领域，无论是科学计算以更少的能源更好地预测天气，与创作者合作生成图像，还是为工业可视化建立虚拟场景。”

02 新NIM微服务带来了什么想象？

在上述应用领域的背后，依赖于3D建模和模拟技术的应用。

在过去，3D内容和场景的构建一直是一个令人头痛的问题，它涉及的链条和过程非常复杂，如建模、着色、动画、照明、渲染等。

在过去的几十年里，动画、视觉效果和网络游戏工作室一直在努力提高各种工具之间的互操作性，但收效甚微。很难将数据从一个位置转移到另一个位置，所以工作室建立了一个复杂的工作流程来管理数据的互操作性。

此外，传统的3D制造工艺除了系统和工具的分离外，还采用了线性合作，涉及到多部门多人员的格式转换和修改，费时费力。

OpenUSD是一个开源的通用3D数据交换框架，它在2023年由NVIDIA开放。、皮克斯、苹果等厂商率先成立，可以通过软件工具与数据类型的交流来构建虚拟世界，具有很高的交互性和兼容性，处理了建立3D场景时工作流程和复杂性的诸多挑战。

NVIDIAASD也是OpenUSD 基于Omniverse平台。在与《连线》杂志资深作家的对话中，黄仁勋曾经说过:OpenUSD是第一种几乎将所有工具的多模式表达结合在一起的格式。理想情况下，随着时间的推移，每个人都可以引入几乎任何格式，这样每个人都可以合作并保留内容。而且生成式AI，一定能帮助Omniverse产生更好的模拟效果。

而且NVIDIA这次推出的针对OpenUSD开发的NIM微服务，也是世界上第一个生成AI模型，用于OpenUSD开发。通过NIM微服务，将生成式AI的能力整合到USD工作流中，大大降低了用户使用OpenUSD的门槛。与此同时，NVIDIA还发布了多种适用于机器人数据类型和应用程序。 Vision 全新的Pro流式传输USD连接器。

来自NVIDIA官网的图片

现在，NIM微服务已经发布了三个项目：一是USD Code 在文本提醒的基础上，NIM微服务可以回答常识性OpenUSD问题，一键生成Python代码。

二是USD Search NIM微服务使开发者能够在海量OpenUSDS中使用自然语言或图像输入、在3D和图像数据库中进行搜索，大大提高了公司对材料进行系统检索和处理的速度。

三是USD Validate NIM微服务，可检查上传文件与OpenUSD发布版本的兼容性，并生成NVIDIAIA。 Omniverse Cloud RTX渲染路径跟踪图像由API驱动。

除NVIDIA提供的原生NIM微服务外，基于这些微服务，生态合作伙伴还创建了多种流行的AI模型，为用户提供推理和推广。

基于NVIDIA最新版本的Edify视觉生成模型，世界著名的创意内容平台Shutterstock推出了全新的文本转3D服务，包括制作3D原型或添加虚拟环境。

例如，建立一个能够准确反射虚拟场景的照明是一项复杂的任务。在此之前，创作者需要操作昂贵的360摄像头设备，亲自在拍摄现场重新建立背景，或者在庞大的数据库中搜索相似的内容。

但是现在，通过3D生成服务，用户可以获得高动态范围的全景图像，最大分辨率为16K，只需用文字或图片描述自己需要的具体环境。 (360 HDRi)。而且，这些场景和部件可以快速切换，例如，在沙漠、热带沙滩或蜿蜒的山路上出现跑车。

创作者除了建立照明之外，还可以快速添加混凝土、木材或皮革等各种渲染材料，从而建立自己的3D资产。此外，在AI的帮助下，可以随时编辑和提供各种流行的文件类型的3D资产。

而且NVIDIA的Edify AI模型，还协助Gettyy。 Images允许艺术家随意控制图像的构图和风格。例如，一个红色的海滩球漂浮在一张完美的珊瑚礁照片上。此外，创作者还可以利用公司的数据对基本模型进行微调，生成符合特定品牌创意风格的图像。

这类模型微服务工具等正大大加快品牌商在3D资产方面的建立，将使数字孪生的研发更加普及和方便。

03 首先，企业已经开始了

工业、自动驾驶、工程、机器人等行业正在体验生成式AI带来的技术红利，因为3D内容和资产建立变得更加方便和准确。尤其是在制造业和广告创意行业，一批先通过NVIDIA积极通过的公司。 Omniverse平台加快了数字孪生和模拟的应用。

可口可乐是第一个为营销场景提供Omniverse和NIM微服务的生成AI品牌。在它演示的视频中，你只需要用自然语言在系统中输入“给我建一张桌子，上面有塔可和莎莎酱，沐浴在晨光中”。

很快，USD Search NIM微服务可以在庞大的3D资产库中搜索相应的3D资产，并且可以通过API快速调用，而USD Code NIM可以将这些模型组成场景，开发者可以通过输入提醒获得Python代码来创建一个新颖的3D世界，这大大提高了他们的创作能力。通过生成式AI，可口可乐可以在全球100多个市场定制个性化形象，实现本土化营销。

来自NVIDIA官网的图片

WPP作为可口可乐背后的广告服务提供商，专门推出了智能营销操作系统。该系统采用了Omniverse开发平台和OpenUSD，可以非常简洁自动地创建多语言文本、图像和视频，简化了广告主和销售人员的内容建立过程。WPP通过生成AI为客户服务，将疯狂的想法转移到现实中。

正如WPP首席技术官所说，“这些创新的美在于它与我们的工作方式高度兼容，并且充分利用了开放标准。它不仅加速了我们未来的工作，而且使我们能够继续巩固和扩大我们之前对OpenUSD等标准的全部投资。使用NVIDIA使用 NVIDIA微服务 Omniverse，与可口可乐企业等公司联合推出创新的新生产设备，我们可以以前所未有的速度。”

富士康作为世界上最大的消费电子代工厂，专门为墨西哥的一家新工厂建造了一个虚拟数字孪生工厂。工程师可以在虚拟环境中定义流程和培训机器人，从而提高工厂的自动化和生产效率，节省时间、成本和能源。

在富士康的背后，Omniverse平台也被用来构建它的数字孪生，所有的3D 将CAD元素整合到同一虚拟工厂，并使用Omniverse和OpenUSD开发的可扩展机器人模拟平台NVIDIAIASD Isaac Sim对机器人进行了训练，为其数字孪生带来了精确逼真的视觉呈现。

除富士康外，还包括台达电子，MTK、和硕等电子制造公司都在使用NVIDIA 建造工厂数字孪生的AI和Omniverse。

在设计过程中，小鹏汽车MPV车型小鹏X9采用了Omniverse平台，通过将车型开发工作流引入虚拟世界，使小鹏汽车在设计新车时避免了传统工作流的瓶颈。

举例来说，Omniverse平台一方面具有很强的互操作性，促使用于工业建模、渲染和3D特效的文件或数据不再需要复杂的转换，加速了小鹏汽车设计部门之间的交流与合作；另一方面，小鹏汽车利用Omniverse的实时渲染和光线跟踪等功能，实现了汽车颜色和内饰变化的即时可视化，使虚拟效果更加真实，有助于满足客户的需求，从而改善产品体验。

在过去的几年里，生成式AI的流行使得外界更加关注ToC和协同办公应用领域，但现在，物理世界将迎来新的爆发和机遇。

本文来自微信微信官方账号“数智前线”（ID：作者：周路平，szqx1991) 经授权发布的赵艳秋36氪。

本文仅代表作者观点，版权归原创者所有，如需转载请在文中注明来源及作者名字。

免责声明：本文系转载编辑文章，仅作分享之用。如分享内容、图片侵犯到您的版权或非授权发布，请及时与我们联系进行审核处理或删除，您可以发送材料至邮箱：service@tojoy.com