虹科案例|大有可為！虹科AR醫(yī)療解決方案應(yīng)用大盤點

近幾年，新冠肺炎疫情席卷全球，迫使醫(yī)院、護理機構(gòu)和其他醫(yī)療衛(wèi)生從業(yè)者不得不開辟一種新途徑來應(yīng)對物理接觸不便所帶來的種種困難。

遠(yuǎn)程醫(yī)療，一種方興未艾的患者護理和治療方式，在疫情環(huán)境下得到了公眾愈加廣泛的認(rèn)識與認(rèn)可，許多醫(yī)療中心開始探索來自AR領(lǐng)域遠(yuǎn)程協(xié)助的魅力，利用AR硬件設(shè)備（眼鏡）與軟件應(yīng)用開展醫(yī)療衛(wèi)生工作，在不影響治療、護理質(zhì)量的情況下更加安全高效地為患者提供服務(wù)。

AR+醫(yī)療，創(chuàng)造醫(yī)學(xué)未來

1、讓醫(yī)療也能“免提”

醫(yī)生最關(guān)心的是病人，AR智能眼鏡讓醫(yī)生可以完全解放雙手并專注于他們的工作。

這意味著醫(yī)生可以隨時在智能眼鏡上保存患者的統(tǒng)計數(shù)據(jù)并進行相關(guān)的注釋說明，并且不用停下與患者的溝通或檢查。這消除了對大量屏幕和監(jiān)控設(shè)備的需求，也可以確?；颊叩拿舾袛?shù)據(jù)能夠保密。

可以通過語音命令控制的免提智能眼鏡使醫(yī)護人員能夠在需要的時候隨時訪問虛擬屏幕上的信息，而無需用手去操作其他設(shè)備、紙質(zhì)文檔等。這種信息獲取與記錄的自由對于無菌手術(shù)室以及其他對環(huán)境有著高要求的應(yīng)用場景可以說是非常友好了。

2、讓專家無處不在

有了AR智能眼鏡，獲取醫(yī)療專業(yè)知識從未如此簡單。醫(yī)療現(xiàn)場的醫(yī)護人員可以與專家連線分享她對患者情況的看法，提供一手資料，并在專家指導(dǎo)下找到并執(zhí)行治療的最佳方法。這種專業(yè)知識的“分散傳播”實際上就是一種分享知識和提高醫(yī)療質(zhì)量的行之有效的方式。

緊急手術(shù)不會因為需要轉(zhuǎn)移到特定地點進行而被耽誤，找專家就像開啟一個線上會議一樣簡單。在任何地方都可以接受來自專家的服務(wù)，這樣大大減少了醫(yī)生與患者的出行成本，更大大提高了醫(yī)療護理的效率與質(zhì)量。

3、讓醫(yī)療教育變得簡單高效

AR眼鏡的視頻流擁有通過內(nèi)置的4K自動對焦攝像頭實時查看對方所見的能力。智能眼鏡不僅消除了手術(shù)室內(nèi)對額外技術(shù)人員或連接顯示器的笨重設(shè)備的需求，也減小了讓實習(xí)醫(yī)師進入手術(shù)室造成無菌條件被破壞的風(fēng)險。

同時，先進的視頻流功能讓學(xué)習(xí)者能夠從外科醫(yī)生的角度實時、高清地體驗正在發(fā)生的事情。在某些情況下，觀看者甚至可以控制攝像機，這給未來的醫(yī)學(xué)教育提供了更廣泛的思路。

4、讓醫(yī)療更具突破

使用智能眼鏡進行虛擬協(xié)作除了有以上眾所周知的傳統(tǒng)好處外，還讓醫(yī)療衛(wèi)生事業(yè)的發(fā)展有了更具突破性的可能。智能眼鏡可以配合一定軟件實現(xiàn)人體映射，因此外科醫(yī)生可以看透手術(shù)單、皮膚和骨骼，更好的了解患者情況以及手術(shù)該如何進行， AR眼鏡可以顯示接下來的手術(shù)步驟，集成的傳感器也會在手術(shù)過程中提供實時幫助。AR+醫(yī)療的未來，創(chuàng)造性與突破性共存。

虹科AR醫(yī)療案例

1、臺灣奇美醫(yī)院的遠(yuǎn)程醫(yī)療

奇美是臺南地區(qū)的創(chuàng)新者，引進了機器人手術(shù)，并擁有最先進的血管造影和放射治療系統(tǒng)。同時奇美也是臺灣急救服務(wù)的先驅(qū)。近年來，為了進一步提升自己的醫(yī)療效率與質(zhì)量，奇美采用了另一個高科技工具：虹科 Vuzix AR 智能眼鏡。

1）急診室應(yīng)用

急診室是最忙碌的醫(yī)療場所，以往，每次患者到達(dá)后，開展急救的過程都是一樣的：評估現(xiàn)狀，收集信息，開始治療，共享信息，在多數(shù)情況下會由專家來接管患者的最終治療與護理。

在整個急救過程中，兩個關(guān)鍵要素是信息和時間。醫(yī)生需要信息來迅速妥當(dāng)?shù)靥幚砘颊叩木o急情況。幾分鐘時間的耽誤對于像是中風(fēng)或心臟病來說就是致命的，關(guān)乎患者的生與死，每分鐘都必不可少。

這就讓虹科 Vuzix AR智能眼鏡有了用武之地。AR技術(shù)的應(yīng)用使參與治療的醫(yī)護人員之間實現(xiàn)了以第一視角進行實時視頻溝通的可能。

在傳統(tǒng)的緊急情況下，患者在轉(zhuǎn)往醫(yī)院的過程中會得到醫(yī)護人員的簡單治療，而專家、急診醫(yī)生只能在醫(yī)院里等待患者的到來。但是， 有了智能眼鏡，醫(yī)生可以在患者到達(dá)醫(yī)院之前開始對其進行治療。當(dāng)醫(yī)護人員和急診醫(yī)生都佩戴智能眼鏡時，急診醫(yī)生可以以醫(yī)護人員的第一視角實時看到病人，了解患者的真實情況并與護送患者的醫(yī)護人員達(dá)成一些治療手段和方式并遠(yuǎn)程主導(dǎo)治療開展，以便爭取寶貴的救命時間。

此外，奇美醫(yī)療中心也服務(wù)于農(nóng)村地區(qū)，許多患者來自其位于嘉里和柳營的附屬醫(yī)院。戴智能眼鏡時， 各附屬醫(yī)院的急診醫(yī)生可以安排不同院區(qū)的多個部門同時進行會診，這樣無論專家身處何處都可以看到患者，不同院區(qū)的醫(yī)生可以詳細(xì)討論患者的病情，從而給患者提供最高效合適的治療方案。

2）手術(shù)室應(yīng)用

任何外科手術(shù)都是通過團隊合作完成的，包括外科醫(yī)生、護士，有時甚至需要技術(shù)人員的協(xié)作。通常，如果外科醫(yī)生想尋求專家的幫助，但是該專家可能不在現(xiàn)場，按照以往可能醫(yī)生會用手機視頻的方式來聯(lián)系專家，但因為光線不均勻?qū)е庐嬅娌磺逦?，視頻角度受限，以及在聯(lián)系時無法用雙手進行操作等原因，效果并不理想。

借助AR智能眼鏡，專家可以在千里之外實時參與手術(shù)，他可以準(zhǔn)確地看到外科醫(yī)生所見，了解患者的病情，并與外科醫(yī)生交流下一步的手術(shù)方案。在手術(shù)完成后，外科醫(yī)生，專家和原來的主治醫(yī)生還可以從不同地方繼續(xù)觀察和交流患者的康復(fù)情況，實現(xiàn)全流程的遠(yuǎn)程醫(yī)療。

3）醫(yī)療教學(xué)應(yīng)用

知識共享對于醫(yī)學(xué)的發(fā)展至關(guān)重要，在奇美醫(yī)療中心，虹科智能眼鏡除了上述用途以外，還用于培訓(xùn)初級醫(yī)師。

培訓(xùn)外科醫(yī)生時，最好的方法就是通過實時視頻傳輸進行教學(xué)，但是錄制和流式傳輸手術(shù)視頻的成本很高且耗時，通常視頻質(zhì)量還很差。但是，當(dāng)每個人都戴著虹科AR智能眼鏡時，實習(xí)生、初級醫(yī)師可以準(zhǔn)確，實時地看到外科醫(yī)生的操作，還可以提出問題與外科醫(yī)生進行交流。當(dāng)初級醫(yī)師自己操刀時，高級醫(yī)師可以使用智能眼鏡的第一視角和出色的音頻交流功能在手術(shù)室外的任何場所提供詳細(xì)的指導(dǎo)，比如癥狀識別，傷口縫合，導(dǎo)管植入等。總之，AR眼鏡與技術(shù)讓醫(yī)療教學(xué)在任何時間任何地點都能進行，并且讓參與各方都可以解放雙手、全身心的參與每場培訓(xùn)。

2、ReSurge采用AR技術(shù)提供手術(shù)援助

ReSurge International是一個全球性的外科培訓(xùn)非營利組織，其使命是在當(dāng)今世界的發(fā)展中國家及地區(qū)開展高質(zhì)量的外科和麻醉項目。他們也將通過AR智能眼鏡來實現(xiàn)自己的“Surgical Sight program”（外科視力計劃），通過增強現(xiàn)實（AR）技術(shù)讓世界上的外科界更加緊密地聯(lián)系在一起。

眼鏡使用的“融合現(xiàn)實”，讓學(xué)員可以在戴上眼鏡的時候真實的感受來自數(shù)千里外的導(dǎo)師的指導(dǎo)，如下圖所示。通過這種方式，ReSurge的導(dǎo)師將確切地看到手術(shù)室中的外科醫(yī)生（學(xué)員）所看到的內(nèi)容，讓他們有機會參與進整個手術(shù)過程并進行實時指導(dǎo)和教學(xué)。

通過這個開創(chuàng)性的計劃，世界各地的外科導(dǎo)師和學(xué)員可以使用虹科 Vuzix AR智能眼鏡和AR軟件應(yīng)用進行實時虛擬培訓(xùn)和操作。這樣的培訓(xùn)方式支持學(xué)員學(xué)習(xí)基本的救生技能并培養(yǎng)他們的自立能力。之后他們可以把學(xué)到的知識分享出去，并自行培訓(xùn)外科醫(yī)生，從而產(chǎn)生變革的漣漪，拯救無數(shù)的生命。

3、Enhatch用XR流技術(shù)提升手術(shù)水平

增強現(xiàn)實 (AR) 在醫(yī)療領(lǐng)域迅速普及,除了AR智能眼鏡的應(yīng)用外，沉浸式流媒體技術(shù)發(fā)揮的作用也不可小覷。它提供了在移動 AR 設(shè)備上可視化復(fù)雜手術(shù)的 3D 數(shù)據(jù)所需的能力和速度——讓外科醫(yī)生能夠在保持對患者高度關(guān)注的同時隨時訪問患者的關(guān)鍵信息。

美國醫(yī)療技術(shù)公司Enhatch的聯(lián)合創(chuàng)始人兼首席執(zhí)行官Peter Verrillo說：“我們希望為患者提供更好的手術(shù)，同時也希望通過減少外科醫(yī)生對于設(shè)備或患者情況了解等的認(rèn)知負(fù)擔(dān)來給醫(yī)生減輕壓力”。Enhatch創(chuàng)建了業(yè)內(nèi)首個智能手術(shù)生態(tài)系統(tǒng)，將公司、技術(shù)和外科醫(yī)生聯(lián)系起來以簡化臨床工作流程、提升病患護理質(zhì)量。

佩戴增強現(xiàn)實耳機，外科醫(yī)生可以實現(xiàn)用語音對患者的信息數(shù)據(jù)進行查看與記錄，無需離開手術(shù)區(qū)域，甚至無需將視線從患者身上移開。在手術(shù)期間，他們可以與非侵入式 UI 元素交互，以訪問患者的數(shù)據(jù)記錄、3D 模型或其他術(shù)前記錄。Peter Verrillo 曾表示做到以上這些的挑戰(zhàn)是將這些非常復(fù)雜的數(shù)據(jù)呈現(xiàn)到醫(yī)生的面前。

這就展示了遠(yuǎn)程渲染的強大功能。Enhatch的軟件平臺自動將術(shù)前圖像（如X射線，CT掃描和MRI）轉(zhuǎn)換為精確的3D模型。對于一次手術(shù)，這通常意味著需要處理數(shù)千兆字節(jié)的數(shù)據(jù)，大大超過了許多移動AR設(shè)備的性能容量。要使其正常工作，需要減少多邊形并過度簡化模型。而這意味著需要更多的處理工作，甚至最終可能產(chǎn)生不太準(zhǔn)確的可視化結(jié)果，這對一場手術(shù)來說是絕對不行的。

Enhatch通過將虹科XR流媒體組件ISAR SDK集成到其解決方案中，讓醫(yī)生能夠輕松的訪問關(guān)于患者的有價值的數(shù)據(jù)。虹科ISAR SDK是一種開發(fā)人員工具，可實現(xiàn)整個AR和VR應(yīng)用程序從云或本地基礎(chǔ)設(shè)施到HoloLens 2，Meta Quest 2，平板電腦或智能手機的遠(yuǎn)程渲染和實時流式傳輸。因此，XR流媒體解決方案允許可視化和操作3D內(nèi)容，大大超出了許多移動設(shè)備的性能規(guī)格。

Peter Verrillo 表示：“AR的美妙之處在于將虛擬世界和現(xiàn)實世界融合在一起，以獲得更成功的臨床結(jié)果， XR流媒體技術(shù)讓外科醫(yī)生能夠分析復(fù)雜的3D醫(yī)療數(shù)據(jù)，而不用將注意力從患者身上移開，最終，在手術(shù)室中使用增強現(xiàn)實是醫(yī)療保健的未來。”

現(xiàn)代醫(yī)學(xué)的發(fā)展與科技的進步息息相關(guān)，可以預(yù)見，AR技術(shù)在醫(yī)療健康領(lǐng)域的應(yīng)用必將更上層樓，或會幫助醫(yī)療領(lǐng)域發(fā)展一次革命性的變革，讓我們拭目以待吧。