Nvidia 与苹果联手打造 Vision Pro，开启 3D 设计与体验新纪元

通常情况下，我们不会看到像英伟达（Nvidia）和苹果（Apple）这样的科技巨头合作。但在本周的 Nvidia GTC 2024 大会上，这两家公司宣布他们将合作开展 Vision Pro 相关项目。具体来说，Nvidia 将把其 Omniverse 云平台引入苹果的头戴式设备，让用户可以直接通过 Vision Pro 与物体和设计进行交互。

这一合作的基础是 Omniverse 云 API，它能够将 Omniverse 资产流传输到苹果耳机上。值得注意的是，Omniverse 本身并不在 Vision Pro 上运行。相反，设计师可以将使用 Omniverse 中的通用场景描述（OpenUSD）制作的场景流传输到 Vision Pro，并与 3D 物体进行本地交互。

在演示视频中，日产展示了这一功能。通过 Vision Pro，用户可以更换车漆颜色、调整装饰，甚至可以利用空间感知功能进入车内。这无疑将在企业领域引起轰动，并对消费者产生一定影响。

Nvidia 主要是在展示其可以将可交互的 3D 应用程序流式传输到 Vision Pro。这是由 Nvidia 的图形传输网络（GDN）实现的，该网络已经被用于从云端流式传输 3D 应用程序。事实上，这样的技术能够在 Vision Pro 上运行是非常重要的。

关键之处在于 Omniverse Cloud API。在 GTC 上，Nvidia 还发布了五个以 Omniverse 通用场景描述（OpenUSD）为中心的新 API，这些 API 可以单独使用，也可以组合使用，包括 USD 渲染、USD 写入、USD 查询、USD 通知和 Omniverse 通道。这些 API 将帮助用户更好地跟踪和修改 OpenUSD 数据，以及实现交互式场景和跟踪USD变化。

目前，Vision Pro 上的 Omniverse Cloud 主要用于企业应用，与苹果耳机的定位相符。然而，这也为未来将可交互的 3D 应用程序传输到苹果头显打下了基础。尽管 Vision Pro 的功能已经相当强大，但在处理高精细度 3D 场景的光线追踪等方面仍有所不足。如果能够以同样的质量流式传输这些场景，未来将会有更多令人兴奋的应用出现。