通用場景描述簡稱OpenUSD,是一個開放且可擴展的生態(tài)系統(tǒng),用于在 3D 世界內(nèi)描述內(nèi)容、合成數(shù)據(jù)、進行仿真和開展協(xié)作。
OpenUSD 提供基本的功能,通過在單個標準化框架中連通不同的數(shù)據(jù)、工具和工作流,助力團隊更輕松地開展復雜的項目。USD 的獨特功能包括分層式合成引擎、自定義架構(gòu)、與文件系統(tǒng)無關的資產(chǎn)解析器,以及 HYDRA 渲染架構(gòu)。
從本質(zhì)上講,OpenUSD 不僅僅是一種格式,它還是打造未來物理 AI 所必需的靈活、開放的基礎。NVIDIA 正在與合作伙伴和開源社區(qū)密切合作,推動相關領域更快、更廣泛地采用 OpenUSD。NVIDIA 同 Pixar、Adobe、Apple 和 Autodesk 共同成立了 OpenUSD 聯(lián)盟 (AOUSD),該聯(lián)盟致力于促進 OpenUSD 的標準化和發(fā)展完善。
睿甄創(chuàng)新首席執(zhí)行官羅茜:“我們花了三年時間收集了 8,000 張現(xiàn)實世界的圖像,但使用 NVIDIA Isaac Sim 和 OpenUSD,我們在短短一周內(nèi)就生成了 200,000 張帶有注釋的合成圖像。這種多樣性使我們的模型準確率提高了 11%?!?/p>
羅茜博士是睿甄創(chuàng)新的創(chuàng)始人兼首席執(zhí)行官。睿甄創(chuàng)新是 AI 和機器人技術領域的領軍企業(yè),其使命是實現(xiàn)人和機器人的和諧協(xié)作。羅茜在自主系統(tǒng)方面有近二十年的經(jīng)驗,為合成數(shù)據(jù)生成、機器人仿真和感知算法領域的重大進步做出了貢獻。在羅茜努力解決現(xiàn)實世界中的檢測和自動化挑戰(zhàn)時,尤其是在解決那些主要是數(shù)據(jù)稀缺和人機協(xié)作方面的挑戰(zhàn)時,OpenUSD 是她使用的一項關鍵資源。
采用 OpenUSD 幫助降低了調(diào)試成本、減少了利益相關者溝通不一致,并解決了開發(fā)周期遲緩問題。通過 OpenUSD,羅茜的團隊可以生成高質(zhì)量的合成數(shù)據(jù),在物理精準的環(huán)境中測試機器人系統(tǒng),并與整個中國和歐盟的合作伙伴攜手開展跨學科研發(fā)工作。NVIDIA Isaac Sim 和NVIDIAOmniverse 等技術基于 OpenUSD 構(gòu)建而成,讓團隊能夠利用模塊化資產(chǎn)、物理精準和直觀的協(xié)作工具,模擬機械臂放置、隧道安全性驗證等工作流。
羅茜還牽頭開展關于利用 OpenUSD 的國際共同創(chuàng)作研討會,將機器人硬件制造商、AI 開發(fā)者和基礎設施管理者聚在一起,專注于實際的部署場景。從隧道維護自動化到在山區(qū)地形部署四足機器人,OpenUSD 有助于實現(xiàn)實時視覺驗證、法規(guī)預遵從測試,以及沉浸式視覺環(huán)境中的快速迭代。展望未來,羅茜認為 OpenUSD 是將中國快速發(fā)展的機器人技術創(chuàng)新與歐洲的可持續(xù)發(fā)展標準相結(jié)合的關鍵,有助于塑造下一個物理 AI世界。
孿界科技首席執(zhí)行官薛友松:“得益于 OpenUSD 的非破壞性功能,當 CAD 和 BIM 數(shù)據(jù)發(fā)生變化時,可以無縫更新大型數(shù)字孿生項目,這能夠真正提高協(xié)作效率?!?/p>
薛友松是孿界科技的首席執(zhí)行官,也是數(shù)字孿生技術專家,在產(chǎn)品開發(fā)方面有超過 21 年的經(jīng)驗。他的開發(fā)團隊致力于打造數(shù)字孿生引擎和解決方案,他們的多元宇宙引擎正在為包括大型專項計劃在內(nèi)的數(shù)千個主要項目提供強力支持。他是 WebGL、3D 處理和大型模型渲染方面的專家,曾幫助編寫和審核行業(yè)級數(shù)字標準,并且擁有多項發(fā)明專利。最近,他的工作重點轉(zhuǎn)移到了為具身智能仿真訓練生成 3D 合成數(shù)據(jù),這進一步擴大了他在創(chuàng)新仿真技術領域的影響力。
薛友松在 OpenUSD 方面的經(jīng)歷始于采用 NVIDIA Omniverse 來提升數(shù)字孿生項目開發(fā)能力,包括使用NVIDIA Isaac Sim 進行先進的仿真訓練。在使用 OpenUSD 之前,薛友松的團隊面臨兩個關鍵限制:通過基于 Web 的工具實時渲染復雜的數(shù)字孿生場景幾乎是不可能的,并且事實證明,高效管理大型基礎設施項目中通常來自不同來源且不斷變化的數(shù)據(jù)非常困難。
自從采用 OpenUSD 以來,薛友松和他的團隊能夠在機場、水利、具身智能仿真等一系列項目中無縫整合和更新多版本的 CAD 和 BIM 模型。這些平臺的模塊化方法意味著只需要更新模型的必要部分,從而可大大簡化版本管理,并在多年的項目生命周期中提高效率。
OpenUSD 還支持為 CAD、BIM 和合成仿真資產(chǎn)搭建集成橋梁,助力打造機器人技術和仿真訓練所需的高質(zhì)量 SimReady3D 模型。這種集成能夠促進各個團隊和項目階段之間更順暢地協(xié)作,讓開發(fā)工作流更靈活、更有效。因此,薛友松的工作流現(xiàn)在更加精簡,能夠快速應對現(xiàn)實世界數(shù)字孿生部署中固有的持續(xù)更新和變化。薛友松計劃繼續(xù)使用 OpenUSD,力爭進一步整合各種類型的資產(chǎn),例如 SimReady 資產(chǎn)和 3D 高斯?jié)姙R模型,為具身智能仿真打造更先進的虛擬訓練平臺。
Lightwheel 仿真工程師兼發(fā)展負責人MustafaMohammadi:“OpenUSD 有助于高效搜索和查詢 3D 資產(chǎn)與數(shù)據(jù)。其模塊化結(jié)構(gòu)能夠使工作流更靈活,為機器人訓練環(huán)境中復雜的優(yōu)化和迭代工作賦能?!?/p>
Mustafa Mohammadi 是 Lightwheel 的仿真工程師兼發(fā)展負責人,專注于開發(fā)人形機器人和四足機器人。他在機器學習、機器人訓練和資產(chǎn)制作方面有十年經(jīng)驗。他的專長是將先進的仿真和以用戶為中心的工作流優(yōu)化相結(jié)合。Mustafa 首先接觸到了NVIDIAIsaac Sim,然后又接觸到了NVIDIAOmniverse 中的 OpenUSD 工具,而它們被證明能夠給機器人仿真帶來變革性影響。
Mustafa 面臨的核心挑戰(zhàn)是確定合適的工具來解決具體問題。USD Search和USD Code等工具變得至關重要,有助于實現(xiàn)有針對性且由意圖驅(qū)動的搜索以及模塊化的場景管理。在采用 OpenUSD 功能之前,工作流缺乏靈活性,并且無法精細控制資產(chǎn)和機器人訓練工作流,尤其是在復雜的大型環(huán)境中。
OpenUSD 和 Omniverse 通過提供可直接使用的資產(chǎn)、模型、框架和算法,大大加快了機器人訓練周期,不僅能夠縮短設置時間,還能夠促進強大的腳本驅(qū)動型訓練和推理順利進行。OpenUSD 的模塊化結(jié)構(gòu)可以提升用戶體驗,確保與新興工具無縫集成,并為第三方連接建立新的渠道。Mustafa 計劃繼續(xù)以 OpenUSD 為基礎,打造模塊化、可擴展且高度可交互的工程生態(tài)系統(tǒng)。
阿貢國家實驗室多學科研究實習生Athena Angara:“OpenUSD 讓我能夠滿懷信心地開展實驗、重構(gòu)和擴展工作,就像使用樂高積木搭建未來的機器人一樣?!?/p>
Athena Angara 是阿貢國家實驗室的多學科研究實習生,從事 AI 和機器人技術方面的工作,擁有在伊利諾伊大學芝加哥分校學習數(shù)據(jù)科學的背景。她致力于將機器人系統(tǒng)、XR (AR/VR) 界面和 AI 驅(qū)動的自動化整合在一起,通過融合多種沉浸式技術,打造更安全、更智能的機器人環(huán)境。Athena 借助 OpenUSD、NVIDIAIsaac Sim和 XR 打造了實時雙臂機器人仿真,用于模擬輔助駕駛實驗室的數(shù)字孿生環(huán)境。
事實證明,OpenUSD 特別有幫助,讓她能夠以模塊化方式構(gòu)建組件、支持 AI 和 XR 集成,并以可擴展的方式高效管理迭代。OpenUSD 的一個關鍵特征是它的靈活性,得益于此,Athena 能夠快速為不同的仿真元素設計原型并將這些元素組合在一起,從而將它們視為基礎模組而非硬編碼系統(tǒng)。通過轉(zhuǎn)向這種一體化的實時開發(fā)工作流,她的團隊在測試、驗證和部署機器人邏輯方面的能力得到了顯著提升,能夠更安全、更有效地部署機器人。
因此,Athena 認為 OpenUSD 不僅僅是一種文件格式,而且還是開展新一代機器人研究工作的戰(zhàn)略基礎,在新一代機器人研究工作中,實驗會變得更具可重復性、適應性更強且協(xié)作水平更高。
Athena 在不斷探索如何使 OpenUSD 支持自適應系統(tǒng)、智能自動化以及仿真環(huán)境中的 AI 訓練,以便幫助塑造未來的智能機器人,并彌合數(shù)字工具和物理創(chuàng)新之間的差距。
-
NVIDIA
+關注
關注
14文章
5598瀏覽量
109803 -
AI
+關注
關注
91文章
39866瀏覽量
301520
原文標題:OpenUSD 全明星:賦能物理 AI 的可互操作 3D 工作流(上)
文章出處:【微信號:NVIDIA-Enterprise,微信公眾號:NVIDIA英偉達企業(yè)解決方案】歡迎添加關注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
開發(fā)工作流創(chuàng)建工作流
NVIDIA全新開放物理AI模型和框架加速人形機器人開發(fā)
使用OpenUSD與NVIDIA Halos構(gòu)建安全物理AI系統(tǒng)
使用OpenUSD實現(xiàn)可互操作3D工作流(下)
使用NVIDIA AI Blueprint打造3D世界
【產(chǎn)品介紹】Altair SimLab可連接CAD的多物理場工作流
玩轉(zhuǎn) KiCad 3D模型的使用
iTOF技術,多樣化的3D視覺應用
使用NVIDIA Cosmos模型提高未來智能汽車安全性
基于NVIDIA AI的3D機器人感知與地圖構(gòu)建系統(tǒng)設計
NVIDIA助力影眸科技3D生成工具Rodin升級
非技術人員如何用n8n + DeepSeek打造AI自動化工作流?
使用OpenUSD實現(xiàn)可互操作3D工作流(上)
評論