?

在BMW全國(guó)4S門店，HoloLens 2 混合現(xiàn)實(shí)看車應(yīng)用，正在顛覆傳統(tǒng)的帶看體驗(yàn)。通過(guò)結(jié)合實(shí)際物理環(huán)境，將渲染的模型疊加至真實(shí)車身，銷售人員與顧客戴上 HoloLens 2，就能夠以全息、交互的方式，沉浸式探索車身內(nèi)部結(jié)構(gòu)和新功能。車型上新更快速，引流拉新更見(jiàn)效，這一創(chuàng)新的看車體驗(yàn)，讓混合現(xiàn)實(shí)在汽車行業(yè)、零售場(chǎng)景的應(yīng)用又一次擲地有聲。

但你是否也會(huì)困惑，在偌大的4S店場(chǎng)景里，顧客如何快速、精準(zhǔn)地定位到某一臺(tái)「想看」的車；逼真又動(dòng)態(tài)的3D模型和街景，又如何通過(guò)小小的頭戴式設(shè)備HoloLens 2 傳遞到顧客眼中。尤其針對(duì)建筑、工程設(shè)計(jì)等需要高精尖渲染模型的行業(yè)，微軟HoloLens 2 又將如何應(yīng)對(duì)？

圍繞著HoloLens 2 這一混合現(xiàn)實(shí)的入口，微軟有著從云服務(wù)、軟件層到設(shè)備端的全棧技術(shù)支持。其中，Azure MR Services 三大關(guān)鍵云服務(wù)——Azure Spatial Anchors空間錨點(diǎn)服務(wù)、Azure Object Anchors 物體錨點(diǎn)服務(wù)、Azure Remote Rendering 遠(yuǎn)程渲染服務(wù)，讓頭戴式混合現(xiàn)實(shí)設(shè)備效能與功耗的「兼顧」難題迎刃而解。

滑動(dòng)了解 ASA、AOA、ARR 服務(wù)

Azure Spatial Anchors

空間錨點(diǎn)服務(wù)

如果把身處的環(huán)境比作一個(gè)巨大的海床，那么HoloLens 2 就是一艘行進(jìn)中的船，“知道我們?cè)谀囊黄Ｓ蚴种匾?。這就是 Azure Spatial Anchors空間錨點(diǎn)服務(wù)的混合現(xiàn)實(shí)場(chǎng)景定位。

借助ASA服務(wù)，HoloLens 2 擁有了即席環(huán)境掃描，與預(yù)先儲(chǔ)存周圍環(huán)境的 Local Anchor 功能，不僅可以繪制精確的空間地圖，也十分便于跨設(shè)備、跨平臺(tái)間的錨點(diǎn)分享、同步與協(xié)作。根據(jù) Spatial Anchor 提供的ID，每臺(tái)設(shè)備都可以直接將預(yù)先上傳至云端的錨點(diǎn)信息「拿來(lái)即用」。因此，ASA服務(wù)提供了混合現(xiàn)實(shí)場(chǎng)景下的 WayFinding尋路功能，可用于發(fā)電廠、IDC機(jī)房巡檢和博物館導(dǎo)覽等復(fù)雜場(chǎng)景。

此外，使用 Azure Spatial Anchors 空間錨點(diǎn)服務(wù)，無(wú)需擔(dān)心生產(chǎn)環(huán)境與數(shù)據(jù)泄露的安全隱患。出于安全性與經(jīng)濟(jì)考量，ASA并不會(huì)把整個(gè)視頻流傳至云端，而只把關(guān)鍵錨點(diǎn)以向量、矢量的形式存成點(diǎn)云；同時(shí)，ASA 以 Azure Cosmos DB 作為底層架構(gòu)，在數(shù)據(jù)存儲(chǔ)時(shí)添加了多層加密；用戶使用HTTP 調(diào)用 Azure服務(wù)，過(guò)程也將得到安全監(jiān)管。

滑動(dòng)了解 AOA、ARR 服務(wù)

Azure Object Anchors

物體錨點(diǎn)服務(wù)

與空間錨點(diǎn)「掃描海床、定位海域」不同，Azure Object Anchors 物體錨點(diǎn)服務(wù)旨在以沉船（目標(biāo)物體）本身為錨點(diǎn)，實(shí)現(xiàn)在不同的海域中「搜索沉船」。

常規(guī)情況下，用戶使用 QR Code（二維碼）作為混合現(xiàn)實(shí)場(chǎng)景中的物體錨點(diǎn)媒介。掃描二維碼、經(jīng)機(jī)器視覺(jué)識(shí)別之后，對(duì)應(yīng)的3D內(nèi)容將疊加至真實(shí)物體之上。如果需要在大量相同的物體表面的相同位置，放置同樣的二維碼，一則耗時(shí)耗力，二則容易因未對(duì)準(zhǔn)而產(chǎn)生人為誤差。

Azure Object Anchors 物體錨點(diǎn)服務(wù)，直接將真實(shí)世界中的目標(biāo)物體作為錨定點(diǎn)——識(shí)別物體外觀、捕獲3D模型；云端訓(xùn)練 Machine Learning模型后，將學(xué)習(xí)好的模型從云端下載至本地，可在HoloLens 2 的 Windows ML 中離線使用。

AOA服務(wù)不僅幫助用戶在任意環(huán)境中自動(dòng)、快速定位目標(biāo)物體，其離線功能也方便用戶根據(jù)特定的業(yè)務(wù)場(chǎng)景，自如切換所需的3D模型，同時(shí)大大節(jié)省了云端資源消耗。除3D模型之外，AOA服務(wù)也支持將全息的標(biāo)記和指令，與3D模型一同疊加在真實(shí)對(duì)象之上，因而在檢修、培訓(xùn)、手術(shù)導(dǎo)航等場(chǎng)景中盡其所長(zhǎng)。用戶也可以直接在內(nèi)置了AOA服務(wù)的微軟第一方Guides應(yīng)用上，直接將 Hologram 幻燈片疊加在真實(shí)物體上。

滑動(dòng)了解 ARR 服務(wù)

Azure Remote Rendering

遠(yuǎn)程渲染服務(wù)

兼顧重量、發(fā)熱量、功耗與效能，是諸如 HoloLens 2 此類的頭戴式混合現(xiàn)實(shí)設(shè)備的共同癥結(jié)所在。由于無(wú)法在設(shè)備上放置用于高精度模型渲染，導(dǎo)致發(fā)熱量很高的圖形芯片，HoloLens 2 選擇將掃描的模型上傳至Azure，使用 Azure Remote Rendering 無(wú)限的云端渲染能力，同時(shí)支持將實(shí)時(shí)流式從云傳輸?shù)皆O(shè)備一端。

啟動(dòng)遠(yuǎn)程渲染會(huì)話后，ARR服務(wù)直接從Azure存儲(chǔ)中加載模型進(jìn)行圖形渲染，并能根據(jù)本地Camera捕捉到的細(xì)節(jié)同步調(diào)整渲染。用戶可以使用ARRT （Azure Remote Rendering Toolkit），在PC端模擬整個(gè)上傳、渲染過(guò)程。

ARR遠(yuǎn)程渲染服務(wù)所提供的1:1高精度模型，實(shí)實(shí)在在地幫助越來(lái)越多的工程師遠(yuǎn)程工作。例如橋梁巡視與維護(hù)，無(wú)需高級(jí)工程師親臨現(xiàn)場(chǎng)、以身犯險(xiǎn)，現(xiàn)在只需通過(guò)無(wú)人機(jī)點(diǎn)云掃描，構(gòu)建模型，即可獲取實(shí)時(shí)數(shù)據(jù)，得出實(shí)時(shí)分析，提供精準(zhǔn)預(yù)測(cè)。既提高了問(wèn)題解決的效率，也大大提升了安全保障。

END

在針對(duì)混合現(xiàn)實(shí)場(chǎng)景的三個(gè)關(guān)鍵 Azure云服務(wù)外，微軟還提供了非常豐富的工具箱與全技術(shù)棧，從連接真實(shí)世界設(shè)備的 Azure IoT 服務(wù)，到可供開(kāi)發(fā)人員調(diào)用的 PaaS級(jí)云服務(wù)，再到開(kāi)箱即用的 SaaS級(jí)混合現(xiàn)實(shí)應(yīng)用，助力各行各業(yè)的企業(yè)加速部署、降本增效，實(shí)現(xiàn)關(guān)鍵業(yè)務(wù)增長(zhǎng)的目標(biāo)。

開(kāi)發(fā)人員可以通過(guò)常規(guī)的 Unity 和虛幻引擎，在 HoloLens 上進(jìn)行混合現(xiàn)實(shí)開(kāi)發(fā)。如果您使用自研引擎，微軟也提供了 Open XR 底層架構(gòu)和 Web XR 技術(shù)，助力構(gòu)建MR應(yīng)用。

本文觀點(diǎn)支持

梅穎廣｜微軟混合現(xiàn)實(shí)資深技術(shù)解決方案專家

王哲｜微軟云 APP Consult 高級(jí)客戶工程師

席驍然｜微軟混合現(xiàn)實(shí) HoloLens 解決方案專家

掃碼進(jìn)入 Azure 小程序

了解更多ASA、AOA、ARR服務(wù)

操作原理與現(xiàn)場(chǎng)演示

MR 應(yīng)用構(gòu)建 降本增效

微軟混合現(xiàn)實(shí) HoloLens 2 是一款不受線纜束縛的頭戴式全息計(jì)算機(jī)，采用人體工程學(xué)設(shè)計(jì)，具有企業(yè)級(jí)應(yīng)用程序，可提高用戶輸出的準(zhǔn)確性，提升企業(yè)工作效率。

HoloLens 2 可助力企業(yè)縮短停機(jī)時(shí)間，構(gòu)建敏捷工廠；促進(jìn)員工隊(duì)伍轉(zhuǎn)型，確保團(tuán)隊(duì)安全工作；遠(yuǎn)程與專家協(xié)作，提供實(shí)時(shí)數(shù)據(jù)更新；以 3D 形式傳達(dá)復(fù)雜概念，改革課程設(shè)置，開(kāi)展體驗(yàn)式學(xué)習(xí)。

云端協(xié)力，虛實(shí)共生。