NVIDIA 與 Apple 協(xié)作將 NVIDIA CloudXR 6.0 原生集成到 visionOS 中，安全地將基于 NVIDIA RTX 的仿真器和專業(yè) 3D 圖形應用，如 Innoactive XR 流媒體解決方案的 Immersive for Autodesk VRED，傳輸至 Apple Vision Pro。

創(chuàng)建AI 工廠和醫(yī)療實驗室的數(shù)字孿生。在擴展現(xiàn)實 (XR) 中設計外觀時尚的汽車，并實現(xiàn)物理精確的顏色和照明效果。完全沉浸在高分辨率賽車游戲或其他模擬游戲中。這些只是專業(yè)人士、開發(fā)者和愛好者通過空間計算所能實現(xiàn)的部分應用，通過NVIDIA CloudXR6.0 串流技術套件，并通過現(xiàn)已與 Apple Vision Pro 原生集成的套件，他們可以將數(shù)字內容與物理世界無縫融合。

在本周于圣何塞舉行的 NVIDIA GTC 全球 AI 大會上，NVIDIA 和 Apple 詳細介紹了 visionOS 如何支持 NVIDIA CloudXR 的注視點流式傳輸技術，使應用能夠在 Apple Vision Pro 上顯示高分辨率、低延遲的沉浸式內容。該功能可根據(jù)用戶視線位置進行智能優(yōu)化渲染分辨率，同時嚴格保護用戶注視數(shù)據(jù)。

Apple 視覺產(chǎn)品高級總監(jiān) Jeff Norris 表示：“Apple Vision Pro 正在重新定義專業(yè)人士利用空間計算的能力，使團隊能夠以全新的方式進行可視化、協(xié)作和工作，并實現(xiàn)超高的保真度。與 NVIDIA 一起，我們將 visionOS 的強大功能與 CloudXR 串流技術相結合，提供高保真體驗，加速從汽車設計到醫(yī)療健康、航空等各行各業(yè)的工作?！?/p>

要求嚴苛的 XR 和空間計算工作負載有三個關鍵要求：4K 分辨率下無損的高保真視覺效果、實時響應速度和完全沉浸式體驗。適用于 visionOS 的 CloudXR 實現(xiàn)了這三點。借助這一全新集成，用戶可以戴上 Apple Vision Pro，通過 Innoactive XR 流媒體解決方案支持的 Immersive for Autodesk VRED 等應用增強其空間計算工作流，從NVIDIA RTX PRO工作站到 GeForce RTX GPU，自動原生地從 PC 端或云端的 NVIDIA RTX 技術設備進行流媒體傳輸。

Apple Vision Pro 的空間計算能力與 NVIDIA RTX 技術提供的出色圖形引擎相結合，可實時提供高保真、沉浸式視覺效果。

越來越多的生態(tài)系統(tǒng)合作伙伴正在利用適用于 visionOS 的 CloudXR 來改變他們的工作流。Autodesk、Innoactive、新思科技、Trifork、X-Plane和 iRacing 等領先軟件提供商正在使用該集成向 Apple Vision Pro 原生傳輸高保真應用。這使 Roche、Foxconn 和 Switch 等企業(yè)以及起亞、寶馬集團、Rivian 和沃爾沃集團等汽車領導者能夠以不折不扣的逼真度可視化海量 3D 資產(chǎn)和復雜仿真。

性能與沉浸感兼得

此前，將高保真 3D 資產(chǎn)引入到獨立設備上通常需要開發(fā)者降低或大幅簡化數(shù)據(jù)集。適用于 visionOS 的 CloudXR 讓專業(yè)人員能夠以高保真度審閱設計和數(shù)字孿生，在保持質量的同時減少不必要的工作。

動態(tài)注視點流式傳輸 (Dynamic Foveated Streaming) 是 CloudXR 6.0 和 visionOS 26.4 支持的一項功能，可確保在焦點處實現(xiàn)盡可能高的視覺保真度，同時最大限度地提高性能和帶寬效率。

近似視線數(shù)據(jù)不會暴露給應用，在嚴格保護用戶隱私的同時提供實現(xiàn)舒適、逼真沉浸感的超低延遲。

行業(yè)領導者加速圖形工作流

Immersive for Autodesk VRED 將于今年春季晚些時候推出，由 Autodesk 與 Innoactive 共同開發(fā)，旨在為包括寶馬、起亞、Rivian 和沃爾沃集團在內的汽車巨頭改變設計審閱流程。使用 Autodesk VRED 的設計師現(xiàn)在可以在 Apple Vision Pro 中以 1:1 的比例使用 RTX 驅動的光線追蹤來可視化大型模型。

Autodesk 汽車設計副總裁 Thomas Heermann 表示：“通過結合 Autodesk VRED 與 NVIDIA CloudXR、Apple Vision Pro 空間計算和 Innoactive 的應用專業(yè)知識，我們能夠實現(xiàn)沉浸式實時協(xié)作，而無需受限于傳統(tǒng)高端設置。汽車設計審閱是高風險時刻，團隊需要快速迭代并做出自信決策。通過使審閱流程更加無縫，公司可以減少在基礎設施上花費的時間，而將更多時間用于將產(chǎn)品變?yōu)楝F(xiàn)實?！?/p>

Innoactive 首席執(zhí)行官 Daniel Seidl 表示：“企業(yè)正在從單用戶 XR 試點轉向協(xié)作式多地點部署，這需要跨地點的性能、控制和可擴展性，而 Innoactive 的企業(yè) XR 流媒體解決方案可將工作站級可視化直接流式傳輸?shù)?Apple Vision Pro 在內的空間設備，用于產(chǎn)品展示廳、設計審查和數(shù)字孿生。”

起亞汽車全球設計中心執(zhí)行副總裁兼負責人 Karim Habib 表示：“通過將沉浸式空間計算與適用于 visionOS 的 CloudXR 集成到我們的工作流中，我們可以在 Apple Vision Pro 上以更高的清晰度和更快的速度評估我們的設計。我們可以共同在共享的真實環(huán)境中體驗比例、表面、顏色和材質，并與全球團隊進行實時協(xié)作。通過這些合作，我們可以不斷改進流程，最大化效率，并始終專注于每個決策背后的創(chuàng)意意圖?！?/p>

沃爾沃集團設計部負責人 Mikael Gordh 表示：“在沃爾沃集團設計部，我們堅持數(shù)字化優(yōu)先，只有在必要時才構建物理原型?？臻g計算、Apple Vision Pro 和 CloudXR 使我們能夠提前體驗用戶看到和觸摸的一切。這項技術可提供前所未有的逼真效果：通過無縫協(xié)作實現(xiàn)優(yōu)質體驗。超越車輛，塑造交通的未來。”

制藥公司羅氏與 Innoactive 協(xié)作，正在使用 Autodesk Revit 軟件、NVIDIA Omniverse庫以及適用于 visionOS 的 CloudXR，在空間計算中模擬其生物流體分析實驗室的布局，然后再在現(xiàn)實世界中建造。

制造商Foxconn正在使用適用于 visionOS 的 CloudXR 可視化工廠車間走查，以便設計師在實際踏入工廠之前探索和優(yōu)化設施。MHP 是一家為出行和制造業(yè)客戶提供管理和 IT 咨詢服務的公司，該公司正在使用新思科技 Ansys Discovery 3D 產(chǎn)品仿真軟件、Omniverse 和 Innoactive Spatial，并利用適用于 visionOS 的 CloudXR 來仿真實時空氣動力學氣流。

數(shù)據(jù)中心平臺提供商 Switch 與 Trifork 協(xié)作，展示了其 EVO AI 工廠的 Omniverse 數(shù)字孿生。通過利用適用于 visionOS 的 CloudXR，Switch 能夠在完全沉浸式的空間環(huán)境中優(yōu)化基礎設施，使運營商能夠隨時隨地監(jiān)控和管理復雜的數(shù)據(jù)中心布局。

為開發(fā)者釋放制作和娛樂潛力

除了企業(yè)用例之外，適用于 visionOS 的 CloudXR 還讓模擬愛好者能夠將 iRacing 和 X-Plane 等高保真 RTX 游戲連接到 Apple Vision Pro，從而打造出具有出色 4K 分辨率的終極模擬裝備。

CloudXR 6.0現(xiàn)已面向開發(fā)者推出，作為 Swift 的原生流式框架，Swift 是適用于 Apple 平臺 (包括 visionOS、iOS、iPadOS 等) 的編程語言。

這意味著 Swift 開發(fā)者可以在 Apple 的集成開發(fā)環(huán)境 Xcode 中直接流式傳輸和構建高保真度消費者和企業(yè)應用，Xcode 用于在 Apple 平臺上開發(fā)、測試和分發(fā)應用。visionOS 26.4 和這些應用將于今年春季向用戶提供。

開始開發(fā)適用于 visionOS 的 CloudXR。