開發擴展現實（XR）應用的難度極大。用戶通常會從一個模板項目入手，并按照現成的打包模板將應用部署到頭顯。這種方法給資產迭代流程帶來了嚴重的阻礙。XR 體驗內的資產更新完全取決于開發者構建、打包和部署新的可執行程序的速度。

NVIDIA Omniverse 中的全新空間框架通過通用場景描述（即 OpenUSD）和由 NVIDIA RTX 驅動的光線追蹤技術幫助解決了這些難題。全球首個全光線追蹤 XR 體驗由此誕生，它使用戶能夠查看其場景中的每一個反射、軟陰影、豐富的光線以及幾何體的動態變化。

現在，用戶可以對包含數百萬個多邊形、物理材質和精確照明的大規模、復雜、全保真設計數據集進行全光線追蹤，來身臨其境地體驗數據集，而無需耗費額外的數據準備時間。

使用 OpenUSD 實現沉浸式工作流

OpenUSD 可確保場景編輯不具有破壞性，從而實現不同工具和生態之間的無縫交互。Omniverse 可渲染和顯示磁盤上的 USD 數據，使用戶能夠以任意節奏迭代這些數據，并實時看到更新的資產 XR 視圖。

因此，用戶可以沉浸式地體驗任意流程環節中的應用，這大大減少了阻礙，提高了迭代速度。用戶甚至可以將 XR 集成到現有的流程中，并且毫不費力地實施。

該空間框架的主要特點包括：

• 用于添加沉浸式體驗和基本 XR 功能的新工具：簡化并提高了設計審查和工廠規劃的工作流效率。

• 將 RTX 光線追蹤和 Omniverse 連接到 SteamVR、OpenXR 和 NVIDIA CloudXR。

• 支持空間計算平臺和頭顯：Omniverse 用戶可以構建與其他基于 OpenUSD 的空間計算平臺（如 ARKit 和 RealityKit）兼容的 USD stage。此外，新增加的對 Khronos Group OpenXR 開放標準的支持將 Omniverse 開發者的體驗擴展到 HTC VIVE、Magic Leap 和 Varjo 等制造商生產的更多頭顯。

Magic Leap 產品副總裁 Jade Meskill 表示：“NVIDIA 所發布的支持 OpenXR 和 Magic Leap 2 的 Omniverse Kit 是企業 AR 領域的一座重要里程碑。企業用戶現在能夠以前所未有的視覺質量，來渲染沉浸式全尺寸數字孿生，并將其從 Omniverse 傳輸至 Magic Leap 2。

Meskill 還表示，為了滿足企業應用的高要求，在現實世界中放置基于全保真設計數據創建的逼真數字孿生并提供精準的照明和反射必不可少。“NVIDIA 和 Magic Leap 工程團隊在視覺質量方面率先取得了關鍵性的技術進展，我們十分高興兩家公司建立了牢固的合作關系。”

將 XR 集成到現有的 3D 工作流中

Omniverse 應用開發者現在可以輕松地將 XR 集成到 3D 工作流中。Omniverse 中的這個新空間框架可實現 3D 場景的實時、沉浸式可視化。還可以將傳送、操作、導航等 XR 功能集成到現有流程中。

通過該空間框架，使用者能夠以混合現實或完全沉浸式的方式，跨設備查看工作資產。NVIDIA CloudXR 可提供逼真度堪比桌面計算的無拘束體驗。

使用者無需下載整個應用，便可使用特定的擴展程序，讓工作流變得更加簡單和模塊化。自動用戶界面優化功能提升了應用的速度和生產力，使播放變得更加流暢。

此外，使用者還可以部署自定義 XR 應用并為特定的工作流而設計用戶界面，例如協作產品設計評審、工廠規劃等。

在頂級頭顯上提供 RTX 驅動的沉浸式體驗

通過 Omniverse Kit 105，可以創建具有極致沉浸感和逼真度的資產，并以全保真度構建具有幾何構造和材質的超逼真應用。

例如，Kit 105 可以在業內分辨率最高的混合現實頭顯 Varjo XR-3 中，驅動達到視網膜級分辨率的 Quad View 渲染功能。該渲染器可生成兩個高分辨率視圖和兩個低分辨率視圖，然后由設備合成出無比逼真和沉浸的 VR 體驗。

Varjo 軟件合作關系總監 Marcus Olsson 表示：“實時光線追蹤是 3D 可視化的‘圣杯’。之前，我們因為圖形和計算方面的要求而無法渲染出像這樣逼真的沉浸式場景。通過 NVIDIA Omniverse 和 Varjo XR-3，用戶可以結合強大的多 GPU 配置和 Varjo 逼真的視覺保真度，在混合現實環境中實現實時光線追蹤。

Quad View 的渲染分辨率達到驚人的 1500 萬像素，將 XR 的視覺保真度提高到一個新的級別。如要充分利用達到視網膜級分辨率的 Quad View 渲染功能，團隊應使用配備 NVIDIA RTX 6000 Ada 顯卡的多 GPU 配置以在 Varjo XR-3 頭顯上實現無縫渲染和最優性能。

使用 Omniverse 開始構建沉浸式體驗和應用

準備好開始使用 Omniverse Kit 105 在應用中構建 XR 并創造沉浸式體驗了嗎？該空間框架現在可以在 VR Experience 下的 Omniverse Extension Library 中使用。將該擴展程序添加到 Kit 應用中，就可以使用 Tablet AR 和 VR 面板。該框架還帶有 Omni.UI，使用戶可以同時在頭顯和桌面中使用此前所開發的桌面工具和界面。

USD Composer 提供了一個在 Omniverse 中測試沉浸式體驗的良好平臺。USD Composer 是 Omniverse 中的一個參考應用，用戶可以在其中輕松打開并制作一個 USD stage。請在 Omniverse 啟動器中安裝 USD Composer，以開始使用。用戶可在 “Window” -> “Rendering” 菜單中找到 “VR” 和 “Tablet AR”。如果正與其他用戶一起工作，可以使用 USD Composer 多用戶工作流開展實時、沉浸式的合作。

開始在 Omniverse 中構建自己的 XR 體驗：https://developer.nvidia.com/omniverse/get-started。

SIGGRAPH 2023

NVIDIA 精彩發布

【1】SIGGRAPH 主題演講：NVIDIA 首席執行官帶來生成式 AI 多項創新 SIGGRAPH 2023 | NVIDIA 發布新一代 GH200 Grace Hopper 超級芯片平臺 SIGGRAPH 2023 | NVIDIA 發布支持生成式 AI 與 OpenUSD 的重大 Omniverse 升級 SIGGRAPH 2023 | NVIDIA Omniverse 開啟通往 OpenUSD 廣闊天地的大門 SIGGRAPH 2023 | NVIDIA 與全球數據中心系統制造商大力推動 AI 與工業數字化的發展 SIGGRAPH 2023 | NVIDIA 與全球工作站廠商共同推出用于生成式 AI、LLM 開發、內容創作和數據科學的系統 SIGGRAPH 2023 | NVIDIA AI Workbench 助力全球企業加速采用自定義生成式 AI SIGGRAPH 2023 | NVIDIA 與 Hugging Face 將連接數百萬開發者與生成式 AI 超級計算

【9】Shutterstock 通過 NVIDIA Picasso 將生成式 AI 應用于 3D 場景

【10】貼圖幫手：NVIDIA Research 展示生成式 AI 如何幫助創建和編輯逼真的材質

【11】初創企業借助 NVIDIA NeMo 撰寫生成式 AI的成功案例

【12】騰勢汽車與 WPP 一同在 NVIDIAOmniverse Cloud 上構建并部署汽車配置器

【13】全新專業顯卡、AI 工具、Omniverse 和 OpenUSD 協作功能強效助力內容創作

【14】NVIDIA 幫助企業與開發者構建更易擴展和自定義的 XR 流式傳輸

【15】NVIDIA 擴展 Maxine 視頻編輯功能，展示 3D 虛擬會議研究成

敬請持續關注

點擊“閱讀原文”，或掃描下方海報二維碼，觀看 NVIDIA 創始人兼 CEO 黃仁勛在 SIGGRAPH 現場發表的 NVIDIA 主題演講回放，了解 NVIDIA 的新技術，包括屢獲殊榮的研究，OpenUSD 開發，以及最新的 AI 內容創作解決方案。