- NVIDIA 发布了其 Omniverse 平台的重大更新,通过 OpenUSD 和生成式 AI 引入了增强的 3D 管道。此更新旨在加速虚拟世界创建和工业工作流程,其中包括针对本机 OpenUSD 应用程序的 Omniverse 套件和针对 AI 驱动的面部动画的 Omniverse Audio2Face 的改进。该版本还扩展了与 Adobe、Apple ARKit 和其他平台的连接,为不同行业提供改进的 3D 内容创建和协作。
NVIDIA今天宣布发布 NVIDIA Omniverse 平台的重要版本,为开发人员和工业企业提供新的基础应用程序和服务,以利用 OpenUSD 框架和生成式 AI 优化和增强其 3D 管道。
NVIDIA 表示,Omniverse(一个 OpenUSD 原生软件平台,用于跨 3D 工具和应用程序进行连接、描述和模拟)的更新将有助于加速工业数字化虚拟世界和高级工作流程的创建。Cesium、Convai、Move AI、SideFX Houdini 和 Wonder Dynamics 现已通过 OpenUSD 连接到 Omniverse。
该平台更新的主要亮点包括 Omniverse Kit(用于开发本机 OpenUSD 应用程序和扩展的引擎)以及 NVIDIA Omniverse Audio2Face 基础应用程序和空间计算功能的改进。
NVIDIA Omniverse 和模拟技术副总裁 Rev Lebaredian 表示:“工业企业正在竞相实现工作流程数字化,从而增加了对支持 OpenUSD 的互联、可互操作的 3D 软件生态系统的需求。” “最新的 Omniverse 更新让开发人员可以通过 OpenUSD 利用生成式 AI 来增强他们的工具,并且允许企业构建更大、更复杂的世界规模模拟,作为其工业应用的数字测试场。”
据 NVIDIA 称,其 Omniverse 套件的更新包括原生 RTX 支持的空间集成,它提供了一组新的扩展现实 (XR) 开发人员工具,让用户可以将空间计算选项本地构建到基于 Omniverse 的应用程序中。其他改进包括新的模块化应用程序构建、新的开发人员模板和资源,以及提高的效率和用户体验。
NVIDIA 表示,它已在其 Omniverse 基础应用程序中展示了这些平台更新,这些应用程序是完全可定制的参考应用程序,创作者、企业和开发人员可以复制、扩展或增强。升级后的应用程序包括:
- Omniverse USD Composer –让 3D 用户可以组装基于 OpenUSD 的大型场景。
- Omniverse Audio2Face –提供对生成式人工智能应用程序编程接口 (API) 的访问,仅从音频文件创建逼真的面部动画和手势,现在包括多语言支持和新的女性基础模型。
OpenUSD 扩展 Omniverse 生态系统
上周宣布NVIDIA 与 Apple、Pixar、Adobe 和 Autodesk 一起加入新成立的“OpenUSD 联盟”(AOUSD),该联盟将致力于促进皮克斯通用场景的标准化、开发、演进和增长描述技术,也称为“OpenUSD”。
今天,NVIDIA 还宣布为开发者和公司提供广泛的框架、资源和服务,以加速 OpenUSD 的采用。此外,该公司还宣布了由 NVIDIA 构建的新 Omniverse Cloud API,供开发人员更无缝地实施和部署 OpenUSD 管道和应用程序。例如,ChatUSD 是开发人员的大型语言模型 (LLM) 副驾驶,可以回答美元知识问题或生成 Python-USD 代码脚本。
NVIDIA 补充说,OpenUSD 支持的新 Omniverse 连接现已推出。Adobe 和 NVIDIA 扩大了在 Adobe Substance 3D、生成式 AI 和 OpenUSD 计划方面的合作,宣布计划将 Adobe Firefly(Adobe 的创意生成式 AI 模型系列)作为 Omniverse 中的 API 提供,使开发人员和创作者能够增强他们的设计流程。
此外,Omniverse 用户现在可以构建与其他基于 OpenUSD 的空间计算平台(例如 Apple 的 ARKit 和 RealityKit)兼容的内容、体验和应用程序,RealityKit 是该公司的 AR 优先 3D 框架,利用 ARKit 将虚拟对象无缝集成到现实世界中。此外,对 Khronos Group 的 OpenXR 开放标准的新支持将 Omniverse 的使用扩展到 HTC VIVE、Magic Leap 和 Varjo 等制造商的更多耳机。
连接到 Omniverse 或使用现在与 Omniverse 兼容的文件格式的其他平台包括:
Wonder Dynamics –通过其 AI 平台 Wonder Studio 连接到 Omniverse,该平台可自动将计算机生成的角色制作动画、照明并将其组合成真人场景。此外,据该公司称,新的 OpenUSD 导出支持将使艺术家能够从单个摄像机视频生成和导出完整的 3D 场景。
Luma AI – USDZ 格式的现实捕捉模型可以轻松导入到 Omniverse。
Convai –创作者可以在其数字孪生环境中添加角色,这些角色可以提供有关环境和物体的相关信息,成为导游或虚拟机器人。
Move AI –使用 Move One 应用程序启用单摄像头动作捕捉,该应用程序可用于生成 3D 角色动画,然后将其导出到 OpenUSD 并在 Omniverse 中使用。
SideFX Houdini –用户现在可以将 Houdini 数字资产直接加载到 Omniverse 视口中,使基于 Houdini 的连接工作流程更加无缝。
Cesium for Omniverse – 支持 3D Tiles,这是一种开放标准,用于在虚拟世界中传输大量地理空间数据集,包括 OpenUSD 支持的数据集。
CGI.Backgrounds –现在在 USD Composer 中提供了几张超高清 HDRi 地图。
Cadence DataCenter 设计软件——现已通过 Omniverse 提供,可帮助用户在其数字孪生的完整环境中查看计算流体动力学仿真。
Blackshark.AI –一个世界数字孪生平台,现已连接到 Omniverse。
NVIDIA 指出,目前使用 Omniverse 进行数字化的客户包括波士顿动力人工智能研究所、大陆集团、沃尔沃汽车和 Marks Design。
可用性
最新的 Omniverse 版本现已提供测试版,可供免费下载,并将很快在 Omniverse Enterprise 上推出。要了解有关 NVIDIA Omniverse 的更多信息,请访问该公司的网站。
源:Auganix
推荐阅读
- VR视频播放器推荐
- VR视频、全景视频、3D视频还傻傻分不清吗?
- Pico使用本地网盘看视频
- VRchat同声传译无碍和老外沟通
- VR视频区分
- 手机视频投屏到PICO上看
- PICO VD串流教程,不用转区
- PICO 手机投屏教程
- PICO、YVR、奇遇Dream等设备串流须知
- PICO必玩得飞行类游戏,避坑选择
- PICO其他好玩