戴著墨鏡開車，炫酷拉風(fēng)。戴著混合現(xiàn)實(shí)眼鏡開車呢？當(dāng)然是汽車自動駕駛，你可以隨意查看交通信息、天氣狀況、沿途建筑的同時，還能通過混合現(xiàn)實(shí)眼鏡調(diào)節(jié)車內(nèi)各類參數(shù)，心動吧？

將增強(qiáng)現(xiàn)實(shí)技術(shù)作為未來移動概念的主要組成部分正是大眾汽車所設(shè)想的未來愿景。為了實(shí)現(xiàn)這一愿景，大眾選擇與微軟合作，并首先將 HoloLens 2用于移動車輛。

傳感器“暈車”，混合現(xiàn)實(shí)進(jìn)軍汽車駕駛受阻

作為探索混合現(xiàn)實(shí)技術(shù)的先行者，大眾汽車在2020年就已為 ID. 系列電動汽車引入了 MR 平視顯示屏，將導(dǎo)航箭頭、車道標(biāo)記和其他信息投射到汽車前方的環(huán)境之中。

大眾汽車集團(tuán)數(shù)據(jù)科學(xué)團(tuán)隊(duì)負(fù)責(zé)人 Andro Kleen 表示：“我們認(rèn)為，混合現(xiàn)實(shí)是我們能夠提供的最直觀信息，它可以增強(qiáng)客戶的用戶體驗(yàn)?！彼?，大眾對于混合現(xiàn)實(shí)潛力的探索，在更早的時候就已開始。

這正是大眾汽車所設(shè)想的未來，將增強(qiáng)現(xiàn)實(shí)技術(shù)作為未來移動概念的主要組成部分。為了實(shí)現(xiàn)這一愿景，大眾選擇與微軟合作，并首先將 HoloLens 2用于移動車輛。

在2015年，大眾汽車啟動了一個結(jié)合無人駕駛汽車和混合現(xiàn)實(shí)技術(shù)的培訓(xùn)項(xiàng)目Race Trainer。在測試時，這個系統(tǒng)可以在學(xué)員前方的平視顯示器疊加箭頭線和制動提示，從而引導(dǎo)他們完成一系列的課程。

與此同時，大眾也開始在汽車駕駛項(xiàng)目中使用 HoloLens 2。但在研究如何使用增強(qiáng)現(xiàn)實(shí)耳機(jī)來教司機(jī)如何更快地繞過賽道時，大眾發(fā)現(xiàn)傳感器“暈車”了，失去了追蹤能力，全息圖也消失了。HoloLens 使用相機(jī)傳感器和慣性測量單元（IMU）來跟蹤運(yùn)動，測量加速度和旋轉(zhuǎn)速度。但在移動環(huán)境中，這兩個傳感器的讀數(shù)會出現(xiàn)沖突，進(jìn)而導(dǎo)致無法識別。為此，大眾汽車向微軟尋求幫助，雙方從2018年開始了合作之旅。

防“暈車”，

HoloLens 2“移動平臺”功能救場

“在經(jīng)過大量的討論后，我們了解到大眾汽車的用例，以及希望實(shí)現(xiàn)的目標(biāo)。為 HoloLens 2開發(fā)移動平臺功能，是首先要解決的難題。”微軟3D計(jì)算機(jī)視覺和機(jī)器學(xué)習(xí)專家 Marc Pollefeys 如是說。

為解決這一問題，Marc Pollefeys 團(tuán)隊(duì)開始對傳感器之間的差異進(jìn)行建模，以支持HoloLens繼續(xù)追蹤和提供合適視圖的算法。由于 Covid-19 的限制，分布在全球各地的研究人員，以遠(yuǎn)程的方式，通過搭乘有軌電車和公共汽車、上下乘坐電梯等方式，來測試全息圖在車輛移動時能保持恒定。

最終克服種種困難，微軟和大眾汽車聯(lián)合開發(fā)出了 HoloLens 2移動平臺功能，從而確保設(shè)備在移動平臺中提供穩(wěn)定的全息圖像顯示，允許汽車在連接的 HoloLens 2 上顯示實(shí)時信息， 并將虛擬對象投放在汽車內(nèi)外部。

系統(tǒng)操作之一：3D 地圖和導(dǎo)航

HoloLens 2將虛擬地圖投影到汽車儀表板上，如導(dǎo)航箭頭和關(guān)鍵十字路口的信息。

系統(tǒng)操作之二：全息行人警告

HoloLens 2將虛擬地圖投影到汽車儀表板上，如導(dǎo)航箭頭和關(guān)鍵十字路口的信息。

系統(tǒng)操作之三：基于混合現(xiàn)實(shí)的動態(tài)溫度調(diào)節(jié)

HoloLens 2與車輛數(shù)據(jù)直接通信，可以通過手勢調(diào)節(jié)溫度或控制氣流的強(qiáng)度和方向。

HoloLens 2的移動平臺功能對海事公司也有很大的吸引力，能幫助他們在出海過程中進(jìn)行設(shè)備故障維修。未來，微軟還將繼續(xù)完善 HoloLens 2 的功能，在電梯、火車、汽車和其他移動環(huán)境投入使用，同時為更多的消費(fèi)者提供無縫、互聯(lián)的移動體驗(yàn)。

關(guān)于微軟混合現(xiàn)實(shí) HoloLens 2

HoloLens 2是一款不受線纜束縛的頭戴式全息計(jì)算機(jī)，采用符合人體工程學(xué)的設(shè)計(jì)，具有企業(yè)級應(yīng)用程序，可提高用戶準(zhǔn)確性和輸出，提高組織的工作效率。利用 HoloLens 2縮短停機(jī)時間，促進(jìn)員工隊(duì)伍轉(zhuǎn)型，構(gòu)建敏捷工廠；使團(tuán)隊(duì)安全工作，縮短護(hù)理時間，遠(yuǎn)程與專家保持聯(lián)系，提供實(shí)時數(shù)據(jù)更新迭代；借助 3D 形式傳達(dá)復(fù)雜概念的課程時間，改革課程設(shè)置，開展體驗(yàn)式學(xué)習(xí)。