2018年3月8日，微軟混合現(xiàn)實(shí)體驗(yàn)部總經(jīng)理羅林巴丁在微軟博客上表示：通過混合現(xiàn)實(shí)，2018年正在成為醫(yī)生和醫(yī)療機(jī)構(gòu)的轉(zhuǎn)型年。
HoloLens作為一款優(yōu)秀的設(shè)備同樣也是先行者，自推出以來，航天、工業(yè)、醫(yī)療等各行各業(yè)都嘗試著用這款炫酷的設(shè)備結(jié)合自身領(lǐng)域。CAE Healthcare就是其中一家致力于提高當(dāng)今醫(yī)療從業(yè)者和學(xué)習(xí)者水平的培訓(xùn)教育機(jī)構(gòu)，就正在進(jìn)行將醫(yī)療教學(xué)與HoloLens結(jié)合的嘗試。
CAE VimedixAR
Vimedix超聲波模擬器將人體器官?gòu)娘@示器屏幕中解放出來，可以顯示需要解剖的結(jié)構(gòu)。醫(yī)生可以放大、轉(zhuǎn)動(dòng)、旋轉(zhuǎn)各項(xiàng)器官模型，以便查看各項(xiàng)器官結(jié)構(gòu)之間的關(guān)系。在模擬器中人體就變得好像一塊塊樂高積木，拆解安裝起來方便自如。用戶可以憑借這種技術(shù)實(shí)時(shí)觀察超聲波束，其極具科幻電影中未來感的操作方式和以一種新奇的視角來觀察人體結(jié)構(gòu)無疑生動(dòng)形象化了人體解剖學(xué)的教學(xué)。
Abiomed Impella是一款用于幫助患者維持其心跳功能和血液循環(huán)的微型血泵。CAE Healthcare正在嘗試將AR技術(shù)融入仿真練習(xí)程序中，使醫(yī)生可以更真實(shí)的模擬練習(xí)世界上最小心臟泵的安裝。不夸張的說，安裝過程就如同穿針引線般不容許絲毫偏差。這項(xiàng)技術(shù)一但成熟，將簡(jiǎn)化練習(xí)的步驟，降低練習(xí)的成本，從而方便主刀醫(yī)師多加練習(xí)，練至行云流水的境界來規(guī)避可能存在的風(fēng)險(xiǎn)。
Medtronic Micra是世界上最小的起搏器（起搏器在需要的時(shí)候向心臟發(fā)出微小的電脈沖，刺激心臟跳動(dòng)）。類似于Abiomed Impella培訓(xùn)方案，將來學(xué)員可以通過觀看實(shí)時(shí)可動(dòng)的Micra傳輸系統(tǒng)和心臟的全息圖像進(jìn)行手術(shù)操作的相關(guān)練習(xí)。
Lucina分娩模擬器：CAE的Lucina生理模擬系統(tǒng)由真人大小的母親和胎兒的人體模型組成，他們具有可活動(dòng)的關(guān)節(jié)以及可以擴(kuò)大的子宮，可以把他們當(dāng)做是兩具缺少生命活動(dòng)的軀殼。學(xué)生可以利用HoloLens在母親模型上的投影來賦予母親胎兒“生命”，從而身臨其境的觀察到母親體內(nèi)各階段的懷孕反應(yīng)。 \
在目前的版本中，LucinaAR還提供了肩難產(chǎn)（肩難產(chǎn)是一種分娩并發(fā)癥，是指胎頭娩出后，胎兒肩膀卡在骨盆出口處，不能娩出的情況，手術(shù)難度較高）的模擬情景。學(xué)生可以通過HoloLens和人體模型練習(xí)這種分娩技術(shù)，以防日后遇到這種情況手足無措，貽誤最佳的手術(shù)時(shí)機(jī)。\
CAE Healthcare的總裁Robert Amyot博士提到：“現(xiàn)在的學(xué)生懷著不同的期望來到課堂，他們期待有一個(gè)互動(dòng)性更強(qiáng)更吸引人的學(xué)習(xí)途徑”。從以上四點(diǎn)也不難看出，在AR教學(xué)方面，學(xué)習(xí)的游戲性得到了很大的提高，面對(duì)曾經(jīng)枯燥的練習(xí)，仿佛將自身置于了一個(gè)游戲場(chǎng)景中。我們常對(duì)復(fù)雜深?yuàn)W的理論知識(shí)產(chǎn)生厭煩情緒，卻對(duì)某些游戲無師自通，將這二者結(jié)合起來或許真能做到古人所說的寓教于樂。
Cardiolens
除去微軟與CAE Healthcare的合作之外，法國(guó)民用航空大學(xué)教授Christophe Hurter博士、微軟研究員Daniel McDuff和Mar Gonzalez Franco還利用HoloLens開發(fā)了一種測(cè)量心率的新方法,他們?yōu)檫@一系統(tǒng)取名為Cardiolens，通過HoloLens在混合現(xiàn)實(shí)中進(jìn)行脈搏和生命體征的測(cè)量。
測(cè)血流量可以獲得許多生命體征，但是在以往都需要通過接觸式的傳感器來完成測(cè)量，Cardiolens的任務(wù)便是讓醫(yī)護(hù)人員在佩戴HoloLens時(shí)，患者的生理數(shù)據(jù)能夠一眼便知。
Cardiolens通過加速度計(jì)（智能手機(jī)或頭戴設(shè)備中內(nèi)置的用于測(cè)量重力和速度的傳感器）或IR（紅外光）相機(jī)來捕捉人眼觀測(cè)不到的光電容積描記（借助光電手段,通過檢測(cè)生物組織血液容積的變化來獲得人體生理學(xué)信號(hào)及特征）和心沖擊描記信號(hào)（通過測(cè)量心臟每個(gè)跳動(dòng)周期的血液噴射來獲得人體生理學(xué)信號(hào)及特征）。
研究團(tuán)隊(duì)開發(fā)了一款軟件可以在HoloLens的相機(jī)面對(duì)人臉時(shí)自動(dòng)識(shí)別面部位置并過濾掉紅色、綠色、藍(lán)色，再通過算法處理便能識(shí)別出埋藏在皮膚下的血量變化。 有了這一創(chuàng)新，將來的患者不必再脫下袖筒，醫(yī)生也不必拿出聽診器，只需帶上眼鏡，一瞥便知心率大小、多少、齊與不齊。