全新 Omniverse Cloud API 幫助開發(fā)者采用 OpenUSD;生成式 AI 模型 ChatUSD LLM 使用 USD 進行對話;RunUSD 將 USD 轉(zhuǎn)換成交互式圖形,DeepSearch LLM 實現(xiàn)語義 3D 搜索
NVIDIA 于今日宣布將為開發(fā)者和企業(yè)提供一系列框架、資源和服務(wù),以加速通用場景描述(即 OpenUSD)的采用。
NVIDIA 正在通過 NVIDIA Omniverse 與新的技術(shù)組合、ChatUSD 和 RunUSD 等云應(yīng)用編程接口(API)以及全新 NVIDIA OpenUSD 開發(fā)者計劃來推進 OpenUSD 的發(fā)展。OpenUSD 是一個 3D 框架,可實現(xiàn)軟件工具與數(shù)據(jù)類型之間的互通,從而構(gòu)建虛擬世界。
NVIDIA 上周宣布與皮克斯、Adobe、蘋果和 Autodesk 共同成立 OpenUSD 聯(lián)盟(AOUSD),以統(tǒng)一 OpenUSD 規(guī)范。對 OpenUSD 的這些投資將為該聯(lián)盟添磚加瓦。
NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛表示:“正如 HTML 點燃了 2D 互聯(lián)網(wǎng)的重大計算革命,OpenUSD 也將開啟協(xié)作式 3D 和工業(yè)數(shù)字化的時代。NVIDIA 通過開發(fā) NVIDIA Omniverse 和生成式 AI ,正在全力推動 OpenUSD 的發(fā)展和應(yīng)用。”
OpenUSD 上云
NVIDIA 發(fā)布了四款自主構(gòu)建的全新 Omniverse Cloud API,幫助開發(fā)者更加無縫地實施和部署 OpenUSD 流程與應(yīng)用。
ChatUSD:一款面向開發(fā)人員的大型語言模型 (LLM) copilot工具,可以回答USD知識問題或生成 Python-USD 代碼腳本。ChatUSD 借助NVIDIA提供的USD功能和 Python-USD 代碼片段進行微調(diào)。
RunUSD:其是一個Cloud API,它通過檢查上傳文件與OpenUSD版本的兼容性,將OpenUSD文件轉(zhuǎn)換為完全路徑跟蹤渲染的圖像,并使用Omniverse Cloud生成渲染。目前,NVIDIA OpenUSD開發(fā)者計劃中的開發(fā)人員可以使用該API的演示。
DeepSearch:其為 LLM 代理,可在海量無標記資產(chǎn)數(shù)據(jù)庫中進行快速語義搜索。
USD-GDN Publisher:其為一鍵式服務(wù),可助力企業(yè)和軟件制造商從 USD Composer 等基于 Omniverse 的應(yīng)用向 Omniverse Cloud GDN發(fā)布基于 OpenUSD 的高保真體驗,并實時傳輸?shù)骄W(wǎng)絡(luò)瀏覽器和移動設(shè)備。
不斷發(fā)展演進的 OpenUSD 功能
OpenUSD 旨在更好地連接電影和動畫制作流程。同時,工業(yè)應(yīng)用(比如構(gòu)建具有互操作性的制造設(shè)計流程、創(chuàng)建符合物理學(xué)的實時工廠數(shù)字孿生或訓(xùn)練和驗證自動駕駛汽車等)也對 3D 框架提出了不同的要求。
為了支持這些高度復(fù)雜的工業(yè)和感知 AI 工作負載,NVIDIA 正在開發(fā)NVIDIA Omniverse(用于開發(fā)應(yīng)用程序的OpenUSD原生軟件平臺),以及地理空間數(shù)據(jù)模型、度量組件、SimReady、OpenUSD 規(guī)范等。
OpenUSD 地理空間數(shù)據(jù)模型讓用戶可以對逼真的工廠、倉庫、城市乃至地球數(shù)字孿生進行模擬和計算。對于極大規(guī)模的項目,它還會考慮到地球的曲率以確保模擬符合物理學(xué)。
工業(yè)應(yīng)用需要合并來自許多工具和來源的數(shù)據(jù)集,每個數(shù)據(jù)集以不同的單位表示。NVIDIA 正在開發(fā)一個 OpenUSD 度量組件,使用戶能夠百分之百準確地合并不同格式的數(shù)據(jù)集。
NVIDIA 還在開發(fā)適用于全新 SimReady 3D 模型的結(jié)構(gòu)。這些模型將包含真實的材質(zhì)和物理屬性,這對于精準訓(xùn)練自主機器人和車輛至關(guān)重要。例如負責分揀包裹的自主機器人需要在 3D 包裹上進行模擬訓(xùn)練,這些包裹會像在真實世界中一樣移動并對物理接觸做出反應(yīng)。
歡迎通過 NVIDIA OpenUSD 開發(fā)者計劃 搶先體驗 OpenUSD 服務(wù)、資源和工具,其中包括由 NVIDIA 設(shè)計師和藝術(shù)家構(gòu)建的兩個可完整分發(fā)的全新 OpenUSD 示例場景—— Da Vinci’s Workshop 與 Riverfront Tower。
進一步了解 OpenUSD及其生態(tài)網(wǎng)絡(luò)、OpenUSD聯(lián)盟 和 NVIDIA Omniverse 平臺。觀看 NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛的 SIGGRAPH 主題演講。