使用Hololens 2實(shí)現(xiàn)混合現(xiàn)實(shí)

混合現(xiàn)實(shí)是計(jì)算領(lǐng)域的下一波浪潮,將取代大型機(jī)、個(gè)人電腦和智能手機(jī)。它對(duì)消費(fèi)者和企業(yè)都具有重要意義。與傳統(tǒng)的屏幕交互不同,混合現(xiàn)實(shí)與我們的生活空間無(wú)縫集成,為與朋友的交流帶來(lái)自然且數(shù)據(jù)連接的體驗(yàn)。

什么是混合現(xiàn)實(shí)?

混合現(xiàn)實(shí)涵蓋一系列沉浸式體驗(yàn),連接和混合物理世界和數(shù)字世界以及增強(qiáng)現(xiàn)實(shí)和視頻游戲應(yīng)用。

混合現(xiàn)實(shí)系統(tǒng)與物理和數(shù)字交互的不斷增長(zhǎng)的前景相關(guān),完全受您的想象力限制。Windows Mixed Reality通過(guò)個(gè)人的華麗全息表示、高保真全息 3D 模型和他們周?chē)氖澜鐚⑦@些用戶體驗(yàn)提升到了一個(gè)成功的水平。

什么是全息圖?

HoloLens可讓您體驗(yàn)全息圖 – 由光和聲音組成的物體,它們看起來(lái)像您周?chē)h(huán)境中的自然物體。全息圖會(huì)響應(yīng)您的注視、手勢(shì)和語(yǔ)音命令,甚至可以與現(xiàn)實(shí)世界的表面交互。它們是無(wú)縫集成到您的物理環(huán)境中的數(shù)字實(shí)體。當(dāng)您為全息圖指定特定位置時(shí),您可以將其精確地定位在世界中。當(dāng)您四處移動(dòng)時(shí),全息圖將保持靜止,成為您周?chē)h(huán)境中的恒定存在。它會(huì)保留其位置,就像您周?chē)澜缰械挠行螌?shí)體一樣。如果您使用固定功能,系統(tǒng)將在您稍后返回時(shí)記住全息圖的位置。

操縱捕獲和虛擬對(duì)象:

混合現(xiàn)實(shí)可以產(chǎn)生人、動(dòng)物、事物等虛擬對(duì)象。但是,在這個(gè)過(guò)程中,你可能需要該對(duì)象或角色與其他虛擬角色/物體進(jìn)行交互以進(jìn)行掃描。

核心概念:

使用手部射線指向并提交

場(chǎng)景理解

房間掃描可視化和空間映射

眼動(dòng)追蹤

坐標(biāo)系

全息框架

空間意識(shí)

手部追蹤

頭部追蹤和眼球追蹤

特征:

相機(jī):優(yōu)化混合現(xiàn)實(shí)應(yīng)用中的視覺(jué)質(zhì)量和全息穩(wěn)定性。

世界鎖定和空間錨點(diǎn):解決穩(wěn)定性問(wèn)題,調(diào)整攝像頭,并集成穩(wěn)定的系統(tǒng),以確保全息圖保持在原位。

共享體驗(yàn):讓多個(gè)用戶在他們的設(shè)備上查看世界各地的相同全息圖。

眼動(dòng)追蹤(凝視):幫助用戶使用眼睛移動(dòng)相機(jī)或目標(biāo)物體。

手勢(shì):與物體互動(dòng)并用手操縱它們。

空間映射:使用虛擬網(wǎng)格覆蓋映射您的物理區(qū)域,以定義對(duì)象邊界并提供真實(shí)世界的感覺(jué)。

空間聲音:通過(guò)沉浸式 360 度音頻增強(qiáng)您的應(yīng)用程序,獲得增強(qiáng)的聲音體驗(yàn)。

語(yǔ)音輸入:捕捉聲音并采取相應(yīng)行動(dòng)。

頭部跟蹤:檢測(cè)頭部位置以確定全息圖在現(xiàn)實(shí)世界中的位置。它通過(guò)兩種跟蹤方法(即頭部注視和提交或頭部注視和停留)幫助用戶輕松與物體交互。

HoloLens將產(chǎn)生巨大影響的行業(yè):

1、醫(yī)療保?。?/p>

雖然涉及醫(yī)療保健,但混合現(xiàn)實(shí)工具的應(yīng)用范圍非常廣泛,特別是在指導(dǎo)和教學(xué)方面。例如肩上手術(shù)治療,醫(yī)學(xué)生可以接受遠(yuǎn)程培訓(xùn),并在進(jìn)行手術(shù)時(shí)得到專業(yè)人員的指導(dǎo)。

HoloLens 幫助醫(yī)生為復(fù)雜的手術(shù)做好準(zhǔn)備,并在手術(shù)期間與其他醫(yī)生進(jìn)行虛擬聯(lián)系以獲得指導(dǎo)。

2、工業(yè)和制造業(yè):

沃爾沃和梅賽德斯-奔馳等公司在復(fù)雜的車(chē)輛維修任務(wù)培訓(xùn)課程中使用增強(qiáng)現(xiàn)實(shí)應(yīng)用。在維修過(guò)程中更換擋風(fēng)玻璃或其他 ADAS 相關(guān)部件后,有專門(mén)的 AR 培訓(xùn)來(lái)重新調(diào)整ADAS傳感器。例如,如果工人可以將整個(gè)車(chē)輛視為3D對(duì)象,那就很方便了。新的HoloLens 2通過(guò)為工人提供寬闊的視場(chǎng)角來(lái)提供幫助。它可以渲染車(chē)輛的模式細(xì)節(jié),并允許工人近距離查看更大的物體。

3、培訓(xùn)與教育:

HoloLens 在教育領(lǐng)域發(fā)揮著至關(guān)重要的作用,尤其是在 ROC Mondrian 等平臺(tái)上。使用該培訓(xùn)平臺(tái)的學(xué)生可以在增強(qiáng)現(xiàn)實(shí)中學(xué)習(xí)復(fù)蘇課程。借助 CRP Plus 應(yīng)用程序和 HoloLens2,學(xué)生可以學(xué)習(xí)使用除顫器 (AED) 進(jìn)行心肺復(fù)蘇并練習(xí)恢復(fù)姿勢(shì)。CRP 中的這些混合現(xiàn)實(shí)概念使學(xué)生能夠隨時(shí)隨地學(xué)習(xí)、進(jìn)行現(xiàn)場(chǎng)測(cè)試和獨(dú)立練習(xí)。

4、營(yíng)銷(xiāo):

使用 HoloLens 2,人們可以虛擬體驗(yàn)展廳或任何地方,并購(gòu)買(mǎi)繪畫(huà)、家具和電子產(chǎn)品等物品。比利時(shí)魯汶博物館使用 HoloLens 2 提供虛擬游覽,使用戶能夠在自己的空間中查看和評(píng)估藝術(shù)品和物品,然后再做出購(gòu)買(mǎi)決定。

5、娛樂(lè):

隨著 HoloLens 混合現(xiàn)實(shí)技術(shù)的創(chuàng)新,娛樂(lè)行業(yè)經(jīng)歷了重大轉(zhuǎn)變。與傳統(tǒng)的頭戴式 VR 體驗(yàn)相比,HoloLens增強(qiáng)了娛樂(lè)性,創(chuàng)造了更多激動(dòng)人心和互動(dòng)性更強(qiáng)的場(chǎng)景。例如,在萬(wàn)圣節(jié)期間,佩戴HoloLens可以讓AR模型更具互動(dòng)性,提供更高的真實(shí)感,并在電影、過(guò)山車(chē)和游戲中帶來(lái)全新類(lèi)型的娛樂(lè)體驗(yàn)。

在當(dāng)今時(shí)代,電子設(shè)備已成為人類(lèi)生活的一部分,混合現(xiàn)實(shí)在許多領(lǐng)域都必不可少,包括醫(yī)療保健、娛樂(lè)、制造和教育。憑借其遠(yuǎn)大的愿景和強(qiáng)大的功能,微軟的HoloLens未來(lái)將有更多發(fā)展空間??纯椿旌犀F(xiàn)實(shí)技術(shù)將如何影響不同的商業(yè)行業(yè)是很有趣的。