把混合現實裝進車里？微軟和大眾這么干了！

作為探索混合現實技術的先行者，大眾汽車在2020年就已為 ID. 系列電動汽車引入了 MR 平視顯示屏，將導航箭頭、車道標記和其他信息投射到汽車前方的環境之中。

大眾汽車集團數據科學團隊負責人 Andro Kleen 表示：“我們認為，混合現實是我們能夠提供的最直觀信息，它可以增強客戶的用戶體驗。”所以，大眾對于混合現實潛力的探索，在更早的時候就已開始。

這正是大眾汽車所設想的未來，將增強現實技術作為未來移動概念的主要組成部分。為了實現這一愿景，大眾選擇與微軟合作，并首先將 HoloLens 2用于移動車輛。

在2015年，大眾汽車啟動了一個結合無人駕駛汽車和混合現實技術的培訓項目Race Trainer。在測試時，這個系統可以在學員前方的平視顯示器疊加箭頭線和制動提示，從而引導他們完成一系列的課程。

與此同時，大眾也開始在汽車駕駛項目中使用 HoloLens 2。但在研究如何使用增強現實耳機來教司機如何更快地繞過賽道時，大眾發現傳感器“暈車”了，失去了追蹤能力，全息圖也消失了。HoloLens 使用相機傳感器和慣性測量單元（IMU）來跟蹤運動，測量加速度和旋轉速度。但在移動環境中，這兩個傳感器的讀數會出現沖突，進而導致無法識別。為此，大眾汽車向微軟尋求幫助，雙方從2018年開始了合作之旅。

“在經過大量的討論后，我們了解到大眾汽車的用例，以及希望實現的目標。為 HoloLens 2開發移動平臺功能，是首先要解決的難題。”微軟3D計算機視覺和機器學習專家 Marc Pollefeys 如是說。

為解決這一問題，Marc Pollefeys 團隊開始對傳感器之間的差異進行建模，以支持HoloLens繼續追蹤和提供合適視圖的算法。由于 Covid-19 的限制，分布在全球各地的研究人員，以遠程的方式，通過搭乘有軌電車和公共汽車、上下乘坐電梯等方式，來測試全息圖在車輛移動時能保持恒定。

最終克服種種困難，微軟和大眾汽車聯合開發出了 HoloLens 2移動平臺功能，從而確保設備在移動平臺中提供穩定的全息圖像顯示，允許汽車在連接的 HoloLens 2 上顯示實時信息, 并將虛擬對象投放在汽車內外部。

HoloLens 2將虛擬地圖投影到汽車儀表板上，如導航箭頭和關鍵十字路口的信息。

HoloLens 2將移動平臺投影到汽車儀表板上，能提醒司機即將出現人行橫道。

HoloLens 2與車輛數據直接通信，可以通過手勢調節溫度或控制氣流的強度和方向。

HoloLens 2的移動平臺功能對海事公司也有很大的吸引力，能幫助他們在出海過程中進行設備故障維修。未來，微軟還將繼續完善 HoloLens 2 的功能，在電梯、火車、汽車和其他移動環境投入使用，同時為更多的消費者提供無縫、互聯的移動體驗。

HoloLens 2是一款不受線纜束縛的頭戴式全息計算機，采用符合人體工程學的設計，具有企業級應用程序，可提高用戶準確性和輸出，提高組織的工作效率。利用 HoloLens 2縮短停機時間，促進員工隊伍轉型，構建敏捷工廠；使團隊安全工作，縮短護理時間，遠程與專家保持聯系，提供實時數據更新迭代；借助 3D 形式傳達復雜概念的課程時間，改革課程設置，開展體驗式學習。