NVIDIA 與 Apple 協(xié)作將 NVIDIA CloudXR 6.0 原生集成到 visionOS 中，安全地將基于 NVIDIA RTX 的仿真器和專業(yè) 3D 圖形應(yīng)用，如 Innoactive XR 流媒體解決方案的 Immersive for Autodesk VRED，傳輸至 Apple Vision Pro。

創(chuàng)建AI 工廠和醫(yī)療實(shí)驗(yàn)室的數(shù)字孿生。在擴(kuò)展現(xiàn)實(shí) (XR) 中設(shè)計(jì)外觀時(shí)尚的汽車，并實(shí)現(xiàn)物理精確的顏色和照明效果。完全沉浸在高分辨率賽車游戲或其他模擬游戲中。這些只是專業(yè)人士、開(kāi)發(fā)者和愛(ài)好者通過(guò)空間計(jì)算所能實(shí)現(xiàn)的部分應(yīng)用，通過(guò)NVIDIA CloudXR6.0 串流技術(shù)套件，并通過(guò)現(xiàn)已與 Apple Vision Pro 原生集成的套件，他們可以將數(shù)字內(nèi)容與物理世界無(wú)縫融合。

在本周于圣何塞舉行的 NVIDIA GTC 全球 AI 大會(huì)上，NVIDIA 和 Apple 詳細(xì)介紹了 visionOS 如何支持 NVIDIA CloudXR 的注視點(diǎn)流式傳輸技術(shù)，使應(yīng)用能夠在 Apple Vision Pro 上顯示高分辨率、低延遲的沉浸式內(nèi)容。該功能可根據(jù)用戶視線位置進(jìn)行智能優(yōu)化渲染分辨率，同時(shí)嚴(yán)格保護(hù)用戶注視數(shù)據(jù)。

Apple 視覺(jué)產(chǎn)品高級(jí)總監(jiān) Jeff Norris 表示：“Apple Vision Pro 正在重新定義專業(yè)人士利用空間計(jì)算的能力，使團(tuán)隊(duì)能夠以全新的方式進(jìn)行可視化、協(xié)作和工作，并實(shí)現(xiàn)超高的保真度。與 NVIDIA 一起，我們將 visionOS 的強(qiáng)大功能與 CloudXR 串流技術(shù)相結(jié)合，提供高保真體驗(yàn)，加速?gòu)钠囋O(shè)計(jì)到醫(yī)療健康、航空等各行各業(yè)的工作?！?/p>

要求嚴(yán)苛的 XR 和空間計(jì)算工作負(fù)載有三個(gè)關(guān)鍵要求：4K 分辨率下無(wú)損的高保真視覺(jué)效果、實(shí)時(shí)響應(yīng)速度和完全沉浸式體驗(yàn)。適用于 visionOS 的 CloudXR 實(shí)現(xiàn)了這三點(diǎn)。借助這一全新集成，用戶可以戴上 Apple Vision Pro，通過(guò) Innoactive XR 流媒體解決方案支持的 Immersive for Autodesk VRED 等應(yīng)用增強(qiáng)其空間計(jì)算工作流，從NVIDIA RTX PRO工作站到 GeForce RTX GPU，自動(dòng)原生地從 PC 端或云端的 NVIDIA RTX 技術(shù)設(shè)備進(jìn)行流媒體傳輸。

Apple Vision Pro 的空間計(jì)算能力與 NVIDIA RTX 技術(shù)提供的出色圖形引擎相結(jié)合，可實(shí)時(shí)提供高保真、沉浸式視覺(jué)效果。

越來(lái)越多的生態(tài)系統(tǒng)合作伙伴正在利用適用于 visionOS 的 CloudXR 來(lái)改變他們的工作流。Autodesk、Innoactive、新思科技、Trifork、X-Plane和 iRacing 等領(lǐng)先軟件提供商正在使用該集成向 Apple Vision Pro 原生傳輸高保真應(yīng)用。這使 Roche、Foxconn 和 Switch 等企業(yè)以及起亞、寶馬集團(tuán)、Rivian 和沃爾沃集團(tuán)等汽車領(lǐng)導(dǎo)者能夠以不折不扣的逼真度可視化海量 3D 資產(chǎn)和復(fù)雜仿真。

性能與沉浸感兼得

此前，將高保真 3D 資產(chǎn)引入到獨(dú)立設(shè)備上通常需要開(kāi)發(fā)者降低或大幅簡(jiǎn)化數(shù)據(jù)集。適用于 visionOS 的 CloudXR 讓專業(yè)人員能夠以高保真度審閱設(shè)計(jì)和數(shù)字孿生，在保持質(zhì)量的同時(shí)減少不必要的工作。

動(dòng)態(tài)注視點(diǎn)流式傳輸 (Dynamic Foveated Streaming) 是 CloudXR 6.0 和 visionOS 26.4 支持的一項(xiàng)功能，可確保在焦點(diǎn)處實(shí)現(xiàn)盡可能高的視覺(jué)保真度，同時(shí)最大限度地提高性能和帶寬效率。

近似視線數(shù)據(jù)不會(huì)暴露給應(yīng)用，在嚴(yán)格保護(hù)用戶隱私的同時(shí)提供實(shí)現(xiàn)舒適、逼真沉浸感的超低延遲。

行業(yè)領(lǐng)導(dǎo)者加速圖形工作流

Immersive for Autodesk VRED 將于今年春季晚些時(shí)候推出，由 Autodesk 與 Innoactive 共同開(kāi)發(fā)，旨在為包括寶馬、起亞、Rivian 和沃爾沃集團(tuán)在內(nèi)的汽車巨頭改變?cè)O(shè)計(jì)審閱流程。使用 Autodesk VRED 的設(shè)計(jì)師現(xiàn)在可以在 Apple Vision Pro 中以 1:1 的比例使用 RTX 驅(qū)動(dòng)的光線追蹤來(lái)可視化大型模型。

Autodesk 汽車設(shè)計(jì)副總裁 Thomas Heermann 表示：“通過(guò)結(jié)合 Autodesk VRED 與 NVIDIA CloudXR、Apple Vision Pro 空間計(jì)算和 Innoactive 的應(yīng)用專業(yè)知識(shí)，我們能夠?qū)崿F(xiàn)沉浸式實(shí)時(shí)協(xié)作，而無(wú)需受限于傳統(tǒng)高端設(shè)置。汽車設(shè)計(jì)審閱是高風(fēng)險(xiǎn)時(shí)刻，團(tuán)隊(duì)需要快速迭代并做出自信決策。通過(guò)使審閱流程更加無(wú)縫，公司可以減少在基礎(chǔ)設(shè)施上花費(fèi)的時(shí)間，而將更多時(shí)間用于將產(chǎn)品變?yōu)楝F(xiàn)實(shí)?！?/p>

Innoactive 首席執(zhí)行官 Daniel Seidl 表示：“企業(yè)正在從單用戶 XR 試點(diǎn)轉(zhuǎn)向協(xié)作式多地點(diǎn)部署，這需要跨地點(diǎn)的性能、控制和可擴(kuò)展性，而 Innoactive 的企業(yè) XR 流媒體解決方案可將工作站級(jí)可視化直接流式傳輸?shù)?Apple Vision Pro 在內(nèi)的空間設(shè)備，用于產(chǎn)品展示廳、設(shè)計(jì)審查和數(shù)字孿生?！?/p>

起亞汽車全球設(shè)計(jì)中心執(zhí)行副總裁兼負(fù)責(zé)人 Karim Habib 表示：“通過(guò)將沉浸式空間計(jì)算與適用于 visionOS 的 CloudXR 集成到我們的工作流中，我們可以在 Apple Vision Pro 上以更高的清晰度和更快的速度評(píng)估我們的設(shè)計(jì)。我們可以共同在共享的真實(shí)環(huán)境中體驗(yàn)比例、表面、顏色和材質(zhì)，并與全球團(tuán)隊(duì)進(jìn)行實(shí)時(shí)協(xié)作。通過(guò)這些合作，我們可以不斷改進(jìn)流程，最大化效率，并始終專注于每個(gè)決策背后的創(chuàng)意意圖?！?/p>

沃爾沃集團(tuán)設(shè)計(jì)部負(fù)責(zé)人 Mikael Gordh 表示：“在沃爾沃集團(tuán)設(shè)計(jì)部，我們堅(jiān)持?jǐn)?shù)字化優(yōu)先，只有在必要時(shí)才構(gòu)建物理原型。空間計(jì)算、Apple Vision Pro 和 CloudXR 使我們能夠提前體驗(yàn)用戶看到和觸摸的一切。這項(xiàng)技術(shù)可提供前所未有的逼真效果：通過(guò)無(wú)縫協(xié)作實(shí)現(xiàn)優(yōu)質(zhì)體驗(yàn)。超越車輛，塑造交通的未來(lái)?！?/p>

制藥公司羅氏與 Innoactive 協(xié)作，正在使用 Autodesk Revit 軟件、NVIDIA Omniverse庫(kù)以及適用于 visionOS 的 CloudXR，在空間計(jì)算中模擬其生物流體分析實(shí)驗(yàn)室的布局，然后再在現(xiàn)實(shí)世界中建造。

制造商Foxconn正在使用適用于 visionOS 的 CloudXR 可視化工廠車間走查，以便設(shè)計(jì)師在實(shí)際踏入工廠之前探索和優(yōu)化設(shè)施。MHP 是一家為出行和制造業(yè)客戶提供管理和 IT 咨詢服務(wù)的公司，該公司正在使用新思科技 Ansys Discovery 3D 產(chǎn)品仿真軟件、Omniverse 和 Innoactive Spatial，并利用適用于 visionOS 的 CloudXR 來(lái)仿真實(shí)時(shí)空氣動(dòng)力學(xué)氣流。

數(shù)據(jù)中心平臺(tái)提供商 Switch 與 Trifork 協(xié)作，展示了其 EVO AI 工廠的 Omniverse 數(shù)字孿生。通過(guò)利用適用于 visionOS 的 CloudXR，Switch 能夠在完全沉浸式的空間環(huán)境中優(yōu)化基礎(chǔ)設(shè)施，使運(yùn)營(yíng)商能夠隨時(shí)隨地監(jiān)控和管理復(fù)雜的數(shù)據(jù)中心布局。

為開(kāi)發(fā)者釋放制作和娛樂(lè)潛力

除了企業(yè)用例之外，適用于 visionOS 的 CloudXR 還讓模擬愛(ài)好者能夠?qū)?iRacing 和 X-Plane 等高保真 RTX 游戲連接到 Apple Vision Pro，從而打造出具有出色 4K 分辨率的終極模擬裝備。

CloudXR 6.0現(xiàn)已面向開(kāi)發(fā)者推出，作為 Swift 的原生流式框架，Swift 是適用于 Apple 平臺(tái) (包括 visionOS、iOS、iPadOS 等) 的編程語(yǔ)言。

這意味著 Swift 開(kāi)發(fā)者可以在 Apple 的集成開(kāi)發(fā)環(huán)境 Xcode 中直接流式傳輸和構(gòu)建高保真度消費(fèi)者和企業(yè)應(yīng)用，Xcode 用于在 Apple 平臺(tái)上開(kāi)發(fā)、測(cè)試和分發(fā)應(yīng)用。visionOS 26.4 和這些應(yīng)用將于今年春季向用戶提供。

開(kāi)始開(kāi)發(fā)適用于 visionOS 的 CloudXR。