通用場(chǎng)景描述簡(jiǎn)稱OpenUSD,是一個(gè)開放且可擴(kuò)展的生態(tài)系統(tǒng),用于在 3D 世界內(nèi)描述內(nèi)容、合成數(shù)據(jù)、進(jìn)行仿真和開展協(xié)作。
OpenUSD 提供基本的功能,通過(guò)在單個(gè)標(biāo)準(zhǔn)化框架中連通不同的數(shù)據(jù)、工具和工作流,助力團(tuán)隊(duì)更輕松地開展復(fù)雜的項(xiàng)目。USD 的獨(dú)特功能包括分層式合成引擎、自定義架構(gòu)、與文件系統(tǒng)無(wú)關(guān)的資產(chǎn)解析器,以及 HYDRA 渲染架構(gòu)。
從本質(zhì)上講,OpenUSD 不僅僅是一種格式,它還是打造未來(lái)物理 AI 所必需的靈活、開放的基礎(chǔ)。NVIDIA 正在與合作伙伴和開源社區(qū)密切合作,推動(dòng)相關(guān)領(lǐng)域更快、更廣泛地采用 OpenUSD。NVIDIA 同 Pixar、Adobe、Apple 和 Autodesk 共同成立了 OpenUSD 聯(lián)盟 (AOUSD),該聯(lián)盟致力于促進(jìn) OpenUSD 的標(biāo)準(zhǔn)化和發(fā)展完善。
LycheeAI 創(chuàng)始人兼機(jī)器人技術(shù)教育家Muammer Bay:“OpenUSD 的 USDA 格式是連通 3D 工作流和代碼的橋梁,能夠使仿真資產(chǎn)易于讀取且易于實(shí)現(xiàn)版本化和自動(dòng)化,這有助于為開發(fā)新一代由 AI 驅(qū)動(dòng)的機(jī)器人技術(shù)鋪平道路?!?/p>
Muammer Bay 是 LycheeAI 的創(chuàng)始人,也是NVIDIA 機(jī)器人技術(shù)大使,同時(shí)還是一名杰出的仿真工程師。在他的教育類 YouTube 頻道上,他通過(guò)分享自己在機(jī)器人仿真和合成數(shù)據(jù)生成方面的專業(yè)知識(shí),為成千上萬(wàn)的工程師、研究人員和機(jī)器人技術(shù)愛好者提供幫助。他對(duì)這個(gè)領(lǐng)域的興趣始于在學(xué)術(shù)上對(duì)機(jī)器人技術(shù)和計(jì)算機(jī)視覺的關(guān)注,以及對(duì)電子游戲的熱情。他在使用 Isaac Replicator 研究合成數(shù)據(jù)時(shí)首次接觸到了 OpenUSD,這使他對(duì)基于仿真的機(jī)器人技術(shù)和一體化數(shù)字世界的價(jià)值產(chǎn)生了持久的興趣。
在接觸到 OpenUSD 之前,Muammer 發(fā)現(xiàn)將精準(zhǔn)物理、實(shí)時(shí)渲染、ROS 和Python 整合到單個(gè)工作流中是一件非常困難的事情。依賴多個(gè)互不連通的工具不僅導(dǎo)致工作流碎片化,而且協(xié)作效率低下。
如今,Muammer 能夠利用 OpenUSD 快速構(gòu)建、訓(xùn)練和迭代 AI 模型,更換場(chǎng)景元素,并專注于教導(dǎo)其他人如何部署這些先進(jìn)的方法。例如,GR00T Mimic工作流展示了高效且可擴(kuò)展的模仿學(xué)習(xí),它利用 OpenUSD 來(lái)管理鉸接式環(huán)境,并基于人類演示生成合成動(dòng)作數(shù)據(jù)。ASCII 可讀的模塊化 USDA 格式有助于實(shí)現(xiàn)清晰度、版本控制和無(wú)縫代碼集成。
因此,Muammer 可以借助生成式 AI實(shí)現(xiàn)資產(chǎn)操控自動(dòng)化并增強(qiáng) 3D 創(chuàng)作能力。通過(guò)采用 OpenUSD,他能夠輕松快速地構(gòu)建、修改和分享復(fù)雜的鉸接式環(huán)境、傳感器裝置和機(jī)器人演示。OpenUSD 的影響力不止于提升個(gè)人工作效率,它還在重塑機(jī)器人社區(qū)開展協(xié)作、分享資產(chǎn)和攜手共建的方式。
Mcity 軟件工程師Darian Hogue:“OpenUSD 在幫助我們滿足NVIDIAOmniverse 的 SimReady 要求方面發(fā)揮了關(guān)鍵作用。通過(guò)使用 USD 來(lái)構(gòu)建資產(chǎn),我們可以確保資產(chǎn)組織得當(dāng)、物理準(zhǔn)確,并且與 Omniverse 仿真工作流兼容?!?/p>
Darian Hogue 在 Mcity 擔(dān)任全棧軟件工程師。Mcity 是密歇根大學(xué)開展的一項(xiàng)領(lǐng)先的研究計(jì)劃,專注于研發(fā)互聯(lián)汽車和輔助駕駛汽車技術(shù)。他致力于開發(fā)可靠的軟件工具,使研究人員和行業(yè)合作伙伴能夠驗(yàn)證創(chuàng)新成果、分析數(shù)據(jù)并做出明智的決策,進(jìn)而提升道路安全性。在開發(fā) Mcity 測(cè)試設(shè)施的開源數(shù)字孿生期間,Darian 將 3D 資產(chǎn)轉(zhuǎn)換為 USD 格式,使其進(jìn)入 SimReady 狀態(tài),以便與NVIDIA Omniverse進(jìn)行有效集成。
在采用 OpenUSD 和NVIDIAOmniverse 之前,高保真?zhèn)鞲衅鲾?shù)據(jù)仿真非常困難。早期的模擬器不支持高保真?zhèn)鞲衅髂P?,而且?AI 訓(xùn)練生成合成數(shù)據(jù)集的方式也不完善。然而,集成 OpenUSD 后極大地改變了他團(tuán)隊(duì)的工作流,讓他們能夠快速迭代 SimReady 資產(chǎn),通過(guò)Python SDK 實(shí)現(xiàn)場(chǎng)景管理自動(dòng)化,以及更可靠地生成用于 AI 模型訓(xùn)練的數(shù)據(jù)。
Darian 最喜歡的 OpenUSD 功能是 Python SDK。該功能不僅能夠讓他管理和更新場(chǎng)景、資產(chǎn)和元數(shù)據(jù),并提供巨大的靈活性,大大加快了資產(chǎn)準(zhǔn)備和自定義速度??傮w而言,這些功能顯著增強(qiáng)了開發(fā)工作流,有助于提高效率、改善團(tuán)隊(duì)之間的協(xié)作,并打造可重用性和一致性更高的數(shù)字孿生生態(tài)系統(tǒng)。
從照明和材料行為的精確建模,到罕見且對(duì)安全至關(guān)重要的駕駛場(chǎng)景仿真,OpenUSD 和NVIDIAOmniverse 讓研究人員能夠更好地復(fù)刻和分析智能汽車所面臨的現(xiàn)實(shí)挑戰(zhàn)。未來(lái),Darian 計(jì)劃進(jìn)一步改進(jìn)其數(shù)字孿生,以便盡量縮小仿真與現(xiàn)實(shí)結(jié)果之間的差距,并幫助加速輔助駕駛技術(shù)的安全部署。
寶馬制造公司斯帕坦堡工廠結(jié)構(gòu)數(shù)字專家John Mitchell:“OpenUSD 為我們提供了一種通用的數(shù)字語(yǔ)言;NVIDIAOmniverse 將它變成了一個(gè)能夠輔助決策的交互式平臺(tái),讓我們可以在開始具體工作之前,就做好規(guī)劃、解決問(wèn)題并進(jìn)行仿真。”
John Mitchell 是寶馬制造公司斯帕坦堡工廠的結(jié)構(gòu)數(shù)字專家,負(fù)責(zé)整個(gè)工廠的創(chuàng)新和數(shù)字化工作。他擁有超過(guò)25 年的經(jīng)驗(yàn),他的很多工作都集中在數(shù)字孿生、機(jī)器人技術(shù)和沉浸式仿真上。在 2020 年首次了解到 OpenUSD 和 NVIDIA Omniverse 技術(shù)庫(kù)后,John 就倡導(dǎo)將其集成到寶馬的工業(yè)元宇宙平臺(tái)中。該平臺(tái)是一套數(shù)字孿生應(yīng)用,能夠改變團(tuán)隊(duì)在工廠車間的協(xié)作方式。
在開發(fā)和采用這些基于 OpenUSD 的應(yīng)用之前,跨 CAD 模型、掃描數(shù)據(jù)和生產(chǎn)布局的協(xié)調(diào)工作不僅耗時(shí),而且相互孤立。通過(guò)基于 OpenUSD 構(gòu)建自己的平臺(tái),寶馬的團(tuán)隊(duì)能夠在施工開始之前,在共享的虛擬環(huán)境中模擬、直觀呈現(xiàn)并驗(yàn)證整個(gè)設(shè)施,其中涵蓋新電池生產(chǎn)線、擴(kuò)建的裝配車間等。通過(guò)該平臺(tái),寶馬的團(tuán)隊(duì)還能夠整合來(lái)自不同工具的數(shù)據(jù),并支持非破壞性的分層協(xié)作:讓團(tuán)隊(duì)能夠在機(jī)械、結(jié)構(gòu)和機(jī)器人技術(shù)層面獨(dú)立開展工作,同時(shí)所有更改都會(huì)被保留下來(lái),而且不會(huì)產(chǎn)生沖突。
借助這些基于 OpenUSD 的工作流解決方案,各個(gè)團(tuán)隊(duì)將生產(chǎn)規(guī)劃效率提升了高達(dá) 30%,將成本高昂的實(shí)地驗(yàn)證造訪減少了多達(dá) 70%,并加快了項(xiàng)目進(jìn)度。John 正在利用 OpenUSD 拓展寶馬的能力,并基于Mega NVIDIA Blueprint構(gòu)建新的解決方案,讓 AI 智能體能夠在工廠內(nèi)試點(diǎn)測(cè)試和訓(xùn)練自主系統(tǒng)。他積極倡導(dǎo)開放的標(biāo)準(zhǔn)和協(xié)作平臺(tái),以便進(jìn)一步為智能汽車制造領(lǐng)域的工業(yè) AI提供強(qiáng)力支持。
nAurava Technologies 首席執(zhí)行官Nandu Vellal:
“OpenUSD 和NVIDIAOmniverse 使我能夠通過(guò)檢測(cè)獲取傳感器數(shù)據(jù),并將其疊加到零件的 CAD,這是其他平臺(tái)無(wú)法實(shí)現(xiàn)的?!?/p>
Nandu Vellal 是 nAurava Technologies 的首席執(zhí)行官,在機(jī)械工程、3D 可視化和工業(yè)檢測(cè)數(shù)字化方面有超過(guò) 30 年的經(jīng)驗(yàn)。在產(chǎn)品設(shè)計(jì)和企業(yè) IT 領(lǐng)域工作數(shù)十年后,他找到了構(gòu)建機(jī)器人檢測(cè)解決方案這一人生使命。他的工作使他能夠?qū)⒆约簩?duì)解決問(wèn)題的熱情傾注到能源、航空航天等領(lǐng)域的工業(yè) 4.0 應(yīng)用中。
他在NVIDIA Isaac Sim剛推出的早期階段就首次接觸到了 OpenUSD,當(dāng)時(shí)他正在尋找用于模擬檢測(cè)場(chǎng)景的先進(jìn)工具。傳統(tǒng)的 CAD 系統(tǒng)無(wú)法支持創(chuàng)建交互式 3D 數(shù)字孿生。OpenUSD 和NVIDIAOmniverse 使得導(dǎo)入傳感器數(shù)據(jù)并將其直接疊加到 CAD 模型成為可能,并且能夠讓 NDE/NDT 檢測(cè)員更深入地了解缺陷,從而可降低認(rèn)知負(fù)擔(dān)并減少對(duì)主觀猜測(cè)的需求。
此外,在工業(yè)檢測(cè)方面,缺陷尺寸、形狀和方向等問(wèn)題曾經(jīng)是抽象的,很難傳達(dá)清楚?,F(xiàn)在,OpenUSD 的數(shù)據(jù)共享功能使得重要信息能夠在檢測(cè)組、維護(hù)組和產(chǎn)品設(shè)計(jì)組之間順利流通,從而可改善工作流中的協(xié)作、責(zé)任歸屬、透明度和效率。
OpenUSD 為可視化開啟了全新的可能:檢測(cè)員現(xiàn)在可以體驗(yàn)由數(shù)據(jù)驅(qū)動(dòng)且能夠?qū)鞲衅鲾?shù)據(jù)集情境化的沉浸式環(huán)境,而管理層和工程師則可以獲取關(guān)于資產(chǎn)健康狀況的實(shí)時(shí)交互式概覽。在行業(yè)會(huì)議上發(fā)表演講時(shí),Nandu 會(huì)孜孜不倦地宣傳 OpenUSD,并將其比喻為粘合劑,可以將數(shù)字工程、新一代機(jī)器人技術(shù)和 AI 結(jié)合在一起,打造出強(qiáng)大的解決方案來(lái)優(yōu)化和維護(hù)工業(yè)資產(chǎn)。
展望未來(lái),Nandu 指出,OpenUSD 不僅解決了檢測(cè)難題,還作為可持續(xù)發(fā)展的基礎(chǔ)技術(shù),它支持更好的規(guī)劃,減少昂貴的錯(cuò)誤,并貫穿資產(chǎn)的整個(gè)生命周期保障其健康狀態(tài)。
-
機(jī)器人
+關(guān)注
關(guān)注
213文章
31097瀏覽量
222381 -
NVIDIA
+關(guān)注
關(guān)注
14文章
5598瀏覽量
109804 -
AI
+關(guān)注
關(guān)注
91文章
39866瀏覽量
301523
原文標(biāo)題:OpenUSD 全明星:賦能物理 AI 的可互操作 3D 工作流(下)
文章出處:【微信號(hào):NVIDIA-Enterprise,微信公眾號(hào):NVIDIA英偉達(dá)企業(yè)解決方案】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
開發(fā)工作流創(chuàng)建工作流
NVIDIA全新開放物理AI模型和框架加速人形機(jī)器人開發(fā)
使用OpenUSD與NVIDIA Halos構(gòu)建安全物理AI系統(tǒng)
探索TLE493D-P3XX-MS2GO 3D 2Go套件:開啟3D磁傳感器評(píng)估之旅
使用OpenUSD實(shí)現(xiàn)可互操作3D工作流(上)
使用NVIDIA AI Blueprint打造3D世界
【產(chǎn)品介紹】Altair SimLab可連接CAD的多物理場(chǎng)工作流
iTOF技術(shù),多樣化的3D視覺應(yīng)用
3D激光輪廓儀可實(shí)現(xiàn)在線3D測(cè)量和檢測(cè)
使用NVIDIA Cosmos模型提高未來(lái)智能汽車安全性
基于NVIDIA AI的3D機(jī)器人感知與地圖構(gòu)建系統(tǒng)設(shè)計(jì)
NVIDIA助力影眸科技3D生成工具Rodin升級(jí)
非技術(shù)人員如何用n8n + DeepSeek打造AI自動(dòng)化工作流?
使用OpenUSD實(shí)現(xiàn)可互操作3D工作流(下)
評(píng)論