針對NVIDIA Omniverse 開發者設計的新型雲服務、SimReady 工具已發佈
世界各地的開發者、創作者和企業都在使用 NVIDIA Omniverse 構建虛擬世界,並突破元宇宙的界限。
Omniverse 是一個基於 Universal Scene Description (USD,一種用於描述虛擬世界的可擴展通用語言)的可擴展計算平臺,它適用于全擬真設計 3D 模擬工作流程,全球各行業的開發者都在使用它構建 3D 互聯網。
在 GTC 大會主題演講中,NVIDIA 宣佈推出重要版本 Omniverse,其中新增了 Omniverse Cloud 託管服務和容器部署,並提供了新的開發者工具包以及針對開發者的開放式發佈管道。
借助新版本及新增功能,開發者可以更輕鬆地構建、擴展 3D 工具和平臺,並將其連接到 Omniverse 生態系統中。
構建並運行元宇宙應用的雲服務
作為 NVIDIA 的第一款軟體即服務(SaaS) 產品,Omniverse Cloud 也是一款基礎架構即服務(IaaS)產品,可連接在雲端、本地或邊緣設備上運行的 Omniverse 應用。
使用者可以在任意設備上使用 Omniverse App 串流功能進行創建和協作、使用 Omniverse Nucleus Cloud 訪問和編輯共用虛擬世界,以及使用 Omniverse Farm 在雲端擴展 3D 工作負載。
Omniverse Cloud 可在全球級規模的 Omniverse Cloud Computer 上運行。它由可實現具有豐富圖形的虛擬世界類比的 NVIDIA OVX、可實現高級 AI 工作負載的 NVIDIA HGX 以及可為邊緣設備提供低延遲互動式 3D 體驗的 NVIDIA Graphics Delivery Network 提供支援。
用於行業工作流的應用(例如用於測試和驗證自動駕駛汽車的 DRIVE Sim 以及用於訓練和測試機器人的 Isaac Sim)都被打包為容器以便於部署。對於用於行業用例的合成資料,雲中的 Omniverse Replicator 可為感知網路生成 3D 合成資料。
Omniverse Kit 為開發者提供出色體驗
Omniverse Kit 是一個功能強大的工具包,可用于構建原生 Omniverse 應用和微服務,它旨在成為連接 Omniverse 的工具和微服務的首要基礎。
Omniverse Kit 可為開發者提供面向 Omniverse 構建應用、擴展程式和連接器所需的所有基礎模組。開發者可以借助其模組化功能,根據使用者的獨特需求,以各種不同的方式合成工具。Kit 團隊正在通過推出新工具和改善用戶體驗來改進工具包。
主要更新
- 現已默認採用 Viewport 2.0,同時對 omni.ui.scene 做出多項改進並全面推出新的 Viewport 功能表,讓使用者可以使用 Viewport 創建工作流並構建工具功能表
- Kit Core 現在支援 C++ 中的協力廠商擴展程式,並新增了多項功能,包括可更輕鬆編寫腳本和熱鍵的 Kit Actions,以及記錄負載活動完整時間軸的 Kit Activity Monitor。這樣,您可以輕鬆地將自己的 C++ 庫引入 Kit,並構建對性能起到關鍵作用的代碼
- Kit Runtime 進行了大量 RTX 性能和品質改進。動作圖形全面改進了 UI/UX,包括用於創建 UI 的特定節點
- 快速構建:用戶可利用大量現有文檔進行改進,包括互動式文檔構建以及 Omni.ui、Scene 和 Viewport 的新示例
Omniverse Kit 上顯示採用 Viewport 2.0 的具有操縱器的使用者介面
Omniverse Exchange 上的發佈門戶
即將推出的 Omniverse Exchange 自行發佈體驗,將為開發者提供一個強大的管道來拓寬連接器、擴展程式和資產庫的使用者受眾。這個發佈門戶將為合作夥伴和社區成員創建一個工作流,用以發佈有機會在 Exchange 中展示的應用、連接器和擴展程式。
Omniverse 客戶可以通過 Omniverse Exchange 無縫訪問行業和專用的協力廠商解決方案,這將加速和優化其工作流。所有內容在發佈前都會經過安全審查並接受品質保證。
開發者可通過搶先體驗計畫(可通過申請加入)將擴展程式或連接器上傳到 NVIDIA Omniverse Exchange 發佈門戶,部分社區成員現已開始使用這些開發者工具。
USD 的最新進展
NVIDIA 認為 USD 是作為用於元宇宙的 HTML 的理想選擇。USD 是一個在 3D 世界內進行描述、合成、模擬和協作的開放式可擴展生態系統,目前正廣泛應用於各行各業。
為加速 USD 的發展以滿足元宇宙的需求,並使其成為虛擬世界的標準語言,NVIDIA 將繼續在各個領域為 USD 生態系統添磚加瓦:從教育到為特定行業用例構建自訂架構,再到向所有受眾提供免費 USD 資產和資源。
NVIDIA 對 USD 的主要更新
- 支持 Asset Revolver (Ar) 2.0,因此 Omniverse Connector 與任何 USD 構建都具有互通性
- 新增並改進了 USD 代碼片段,其中包含常見工作流的文檔
- Omniverse Kit 的 USD C++ 擴展示例,包括開源 USD 架構示例和教程(即將推出)
- 支持 UTF-8 識別字,可完全交換使用國際字元集編碼的內容(即將推出)
- 開源文本渲染代理,支援人類可讀的調試並令場景代理實現的單元和 A/B 測試更加高效(即將推出)
NVIDIA 已開發出各主流行業應用所需的 Omniverse Connector。在 GTC 2022 上,NVIDIA推出了適用於 Autodesk Alias、 Siemens JTTM 資料格式以及開放地理聯盟 (OGC) Web 地圖服務和 API 的連接器,現已推出測試版。同時,適用於 Unity、 SimScale 以及部分 Siemens Xcelerator 產品組合的連接器也已進入開發階段。
此外,新的 Omniverse 擴展程式還擴展了 Omniverse 應用的功能,包括 Motionverse(來自北京深度科技有限責任公司)以及 in3D 和 SmartCow。同時,針對 Prevu3D 和 Move.AI 的擴展程式也將很快問世。
用於模擬工作流的 SimReady 資產
NVIDIA 還發佈了一種新類別的 3D 資產—— SimReady。用於數位孿生和 AI 訓練工作負載的 3D 資產,需要具有特定的、基於 USD 的屬性,NVIDIA 正在開發數千種 SimReady 素材並制定構建規範,以針對特定模擬工作負載(如機械手訓練和自動駕駛汽車訓練)量身打造資產。
SimReady 展現出來的全保真視覺效果美輪美奐,遠超 3D 藝術資產。其中包含帶有附加中繼資料的內容,這些中繼資料功能強大,可插入到任何 Omniverse Simulation 中,呈現出來的效果與現實世界並無二致。開發者和技術藝術家可以將 SimReady 內容作為標準基準或起點,它會隨著 Omniverse 等模擬模擬工具的不斷發展,變得更加穩健。
這些資產可實現全保真視覺化,達到有如照片的逼真效果。資產中會一直包含核心模擬中繼資料,可在導入藝術素材時輕鬆訪問這些中繼資料。SimReady 資產還將 USD 的模組化屬性應用其中,讓技術藝術家能夠靈活地生成合成資料。
針對開發者的 SimReady 資產屬性
- 語義標籤會以可預測的一致方式識別 3D 模型的各種元件,來説明使用者訓練類比演算法。這些標籤為訓練中的標注資料提供了真值任意輸出變數
- 物理材質令類比能夠更貼近現實,支援用戶能夠使用雷射雷達和雷達等非視覺感測器,以微調電腦觀察世界的方式
- 剛體物理學的精確品質和經定義的重心,可幫助技術藝術家創建反映真實世界行為的模擬
- 經過定義的分類可以位搜索和發現提供一致的標籤,因此可跨多領域使用資產
- 強大的運動學和約束條件,可幫助用戶定義複雜的多方關係和行為
- 高級 EM 材質可揭示整個光譜中的行為
利用 Omniverse Replicator 生成合成資料集
現在,可以通過 NVIDIA NGC 上託管的容器以及 Omniverse Cloud 搶先體驗在雲中部署 NVIDIA Omniverse Replicator。它採用新的 Replicator Insight 應用,增強了對已生成資料的查看和檢測能力。
包括 Siemens SynthAI、SmartCow、Mirage 和 Lightning AI 在內的眾多合作夥伴都正在將 Omniverse Replicator 集成到其現有工具中,用以擴展合成資料工作流。詳細瞭解 Omniverse Replicator 如何通過自訂物理屬性準確的合成資料生成流程來更快地加速 AI 訓練。
Ada Lovelace GPU 助力提升渲染性能
借助 GTC 大會上宣佈的全新 NVIDIA Ada Lovelace GPU 的即時渲染、圖形和 AI 性能,技術設計師和開發人員可以構建更大規模的虛擬世界。NVIDIA Ada Lovelace 的渲染性能比上一代 NVIDIA RTX A6000 提高了 2 倍以上,可實現 4K 解析度的即時路徑追蹤。同時,使用者可以借助 NVIDIA Ada Lovelace GPU 以互動式方式進行編輯並運行大型虛擬世界,並對虛擬世界進行即時更新。
神經圖形的新時代
神經圖形可以更改內容的創建和體驗方式。現在,創作者可以利用 NVIDIA AI ToyBox 上的 AI 工具在 3D 工作流中試驗新的研究成果。AI Animal Explorer 現已推出,即將發佈以下更新:
- GANverse3D,提供基於 GAN 和基於擴散模型的實驗性 AI 工具
- AI Car Explorer,提供按屬性(如製造和風格)構建的網狀/紋理汽車模型
- Canvas360,採用 360 度景觀和 3D 設計背景
Omniverse 中的程式化行為
現在,Omniverse 可在 Omniverse 世界中實現行為、移動和動作的程式化。行為和物理類比技術提高了易用性並增強了優化效果和功能性。借助基於 OmniGraph 節點的新物理系統,無需手動製作任何動畫,即可完全實現任何行為、移動和動作的程式化。
PhysX 助力實現強大而靈活的模擬
NVIDIA PhysX 是 Omniverse 中的先進即時物理引擎。GTC 大會上發佈了以下幾項主要更新:
- 改進了自動化和用於創建物件的物理工具列
- 支持多個場景,能夠將單個資產和層放入自己的物理場景中
- 物理碰撞的音訊
- 能夠在 Omnigraph 中設計車輛和力場
- 減少了 CPU 性能瓶頸並針對柔體模擬對 GPU 進行了改進
- 可以模擬粒子系統的碰撞