空間計(jì)算體驗(yàn)正在深入改變我們與數(shù)據(jù)交互的方式，通過(guò)擴(kuò)展現(xiàn)實(shí)（XR）和數(shù)字孿生等技術(shù)打通物理世界與數(shù)字世界。這些進(jìn)步讓我們能夠以更加直觀和沉浸式的方式分析和理解復(fù)雜的數(shù)據(jù)集。

本文將介紹開(kāi)發(fā)者現(xiàn)在如何在沉浸式環(huán)境中使用基于通用場(chǎng)景描述（OpenUSD）的 NVIDIA Omniverse 數(shù)據(jù)集，將理解和洞察提升到新的水平。

獨(dú)特的混合渲染解決方案

創(chuàng)建沉浸式空間體驗(yàn)存在特有的困難。通常情況下，XR 設(shè)備無(wú)法以逼真、沉浸式體驗(yàn)所需的詳細(xì)程度渲染復(fù)雜的數(shù)據(jù)集。硬件方面的限制會(huì)導(dǎo)致保真度降低，難以保留復(fù)雜的細(xì)節(jié)。為了解決這些困難，NVIDIA 在 CES 2025 上宣布，Omniverse 平臺(tái)現(xiàn)已加入適用于 Omniverse 數(shù)字孿生工作流的空間流式傳輸，從而實(shí)現(xiàn)視覺(jué)保真度和性能皆無(wú)可比擬的 XR 體驗(yàn)。埃森哲、Innoactive 和 Katana 已開(kāi)始將該工作流集成到其現(xiàn)有的空間工作流中。

該混合渲染工作流使用 NVIDIA RTX GPU 和 NVIDIA 圖形交付網(wǎng)絡(luò)（GDN）將本地渲染和云端渲染相結(jié)合。這種方法既能保證高質(zhì)量的沉浸式體驗(yàn)，又能減輕本地設(shè)備的壓力。開(kāi)發(fā)者現(xiàn)在可以將基于 OpenUSD 的高保真 Omniverse 數(shù)字孿生傳輸?shù)?Apple Vision Pro。

圖 1. 適用于 Omniverse 數(shù)字孿生工作流的空間流式傳輸實(shí)現(xiàn)了視覺(jué)保真度和性能皆無(wú)可比擬的 XR 體驗(yàn)。

設(shè)置空間流式傳輸

按照以下步驟，使用 Omniverse 平臺(tái)和 Apple Vision Pro 構(gòu)建自己的混合渲染應(yīng)用和傳輸沉浸式體驗(yàn)。

01創(chuàng)建 Omniverse Kit 應(yīng)用

首先創(chuàng)建一個(gè) Omniverse Kit 應(yīng)用。它將作為數(shù)據(jù)集的服務(wù)器，處理計(jì)算密集型渲染任務(wù)。

02添加 XR 擴(kuò)展

通過(guò)加入 XR 擴(kuò)展捆綁包實(shí)現(xiàn)空間流式傳輸，這能夠簡(jiǎn)化設(shè)置并確保加入所有必要的組件。

03構(gòu)建并運(yùn)行 Kit 應(yīng)用

構(gòu)建并運(yùn)行 Kit 應(yīng)用，以驗(yàn)證其是否能夠正確處理和傳輸數(shù)據(jù)。

04設(shè)置客戶端項(xiàng)目

打開(kāi) Mac 上的 Xcode 并配置客戶端項(xiàng)目。這將在Apple Vision Pro 上呈現(xiàn)最終視覺(jué)效果。

05使用 Apple Vision Pro 模擬器進(jìn)行測(cè)試

使用 Xcode 中的 Apple Vision Pro 模擬器進(jìn)行測(cè)試和調(diào)試，無(wú)需現(xiàn)實(shí)的耳機(jī)。

06配置示例項(xiàng)目

調(diào)整提供的示例項(xiàng)目，以便與您的特定數(shù)據(jù)集配合使用。默認(rèn)配置使用 Purse USD 數(shù)據(jù)集作為參考。

07連接到 Omniverse 服務(wù)器

最后，將客戶端項(xiàng)目連接到 Omniverse 服務(wù)器，并通過(guò) Omniverse 中的 ActionGraph Logic 管理兩者之間的通信。

設(shè)置空間流式傳輸?shù)闹饕⒁馐马?xiàng)

設(shè)置空間流式傳輸環(huán)境需要幾個(gè)組件，詳情如下。

作為服務(wù)器的 Kit 應(yīng)用：用于處理渲染任務(wù)，減少本地硬件壓力，確保運(yùn)行的流暢。

XR 擴(kuò)展：簡(jiǎn)化開(kāi)發(fā)并最大程度地減少設(shè)置錯(cuò)誤。

提前構(gòu)建和運(yùn)行：在繼續(xù)下一步操作前發(fā)現(xiàn)服務(wù)器設(shè)置中的潛在問(wèn)題。

Xcode 客戶端項(xiàng)目：管理服務(wù)器與本地設(shè)備之間的無(wú)縫通信

模擬器測(cè)試：通過(guò)消除對(duì)物理硬件的依賴，加快開(kāi)發(fā)速度。

示例項(xiàng)目：為定制特定數(shù)據(jù)集提供了一個(gè)強(qiáng)大的起點(diǎn)。

確保性能的最佳實(shí)踐

優(yōu)化渲染

通過(guò)最大程度地減少延遲和優(yōu)化網(wǎng)絡(luò)狀況確保最佳性能，這樣可以最大限度地提高空間體驗(yàn)的響應(yīng)速度和質(zhì)量。

照明和內(nèi)容

堅(jiān)持采取照明和內(nèi)容設(shè)計(jì)的最佳實(shí)踐，以實(shí)現(xiàn)視覺(jué)效果驚艷的逼真環(huán)境，提高用戶的參與度。

混合渲染的優(yōu)點(diǎn)

使用 NVIDIA 混合渲染工作流傳輸沉浸式體驗(yàn)具有顯著的優(yōu)勢(shì)：

高保真視圖：在不影響質(zhì)量的前提下保全數(shù)據(jù)集的保真度。現(xiàn)在已經(jīng)可以渲染出大型企業(yè)數(shù)據(jù)集中的復(fù)雜細(xì)節(jié)并傳輸?shù)?Apple Vision Pro 的高分辨率顯示器上。

性能和響應(yīng)速度：云 GPU 可渲染更復(fù)雜的數(shù)據(jù)集、處理更多 AI 工作流并且可以擴(kuò)展到同時(shí)連接多個(gè)用戶。

節(jié)約成本和能源：利用擴(kuò)展自如的云資源降低成本和能耗。

可訪問(wèn)性：無(wú)需昂貴、功能強(qiáng)大的工作站，即可實(shí)現(xiàn)沉浸式數(shù)字孿生體驗(yàn)。這能夠推動(dòng)高質(zhì)量 XR 應(yīng)用的普及化。

可持續(xù)性：由于依靠的是數(shù)字模型而非物理原型，因此可以減少材料浪費(fèi)和生產(chǎn)成本。例如，數(shù)字渲染最多可為每個(gè)項(xiàng)目節(jié)省 9000 美元。

充分發(fā)揮 Apple Vision Pro 的性能：充分利用高分辨率顯示屏、空間音頻等先進(jìn)功能特征，提供無(wú)可比擬的用戶體驗(yàn)。

下一步

現(xiàn)在就開(kāi)始使用適用于 Omniverse 數(shù)字孿生的空間流式傳輸。