6月6日，隨著蘋果的首款頭顯產(chǎn)品一夜封神，虛擬顯示技術(shù)的熱度也再度被引爆。

值得關(guān)注的是，就在同一天， 來自法國(guó)巴黎的醫(yī)療公司Avatar Medical宣布，其虛擬現(xiàn)實(shí)（VR）手術(shù)規(guī)劃技術(shù)獲得了FDA 510（k）的批準(zhǔn)。

這家初創(chuàng)公司利用虛擬現(xiàn)實(shí) (VR) 為外科醫(yī)生提供沉浸式、交互式和精準(zhǔn)的 3D 醫(yī)學(xué)圖像體驗(yàn)，以更好地進(jìn)行手術(shù)準(zhǔn)備和規(guī)劃。 這項(xiàng)技術(shù)是由國(guó)際知名的醫(yī)學(xué)研究中心巴斯德研究所（Institut Pasteur）和居里研究所(Institut Curie)聯(lián)合開發(fā)，經(jīng)過4年攻關(guān)得出的創(chuàng)新成果。

去年，元宇宙概念的大熱也曾引發(fā)一股虛擬現(xiàn)實(shí)在醫(yī)療行業(yè)的熱潮，F(xiàn)DA也順應(yīng)潮流，推出了針對(duì)AR和VR醫(yī)療器械的新網(wǎng)頁(yè)，專門介紹結(jié)合增強(qiáng)現(xiàn)實(shí)和虛擬現(xiàn)實(shí)技術(shù)的醫(yī)療器械。 截止目前，已經(jīng)有40+AR/VR醫(yī)療器械獲得了FDA批準(zhǔn)。

雖然元宇宙概念逐漸淡去，但VR醫(yī)療產(chǎn)品仍在持續(xù)不斷的涌現(xiàn)。而蘋果Vision Pro的橫空出世也為VR醫(yī)療軟件提供了一個(gè)更加先進(jìn)和具有想象力的平臺(tái)。這也標(biāo)志著，虛擬現(xiàn)實(shí)在醫(yī)療領(lǐng)域的滲入已經(jīng)形成了一股不可逆轉(zhuǎn)的潮流，有待我們持續(xù)去發(fā)掘。

三合一VR平臺(tái)

AVATAR MEDICAL 總部位于法國(guó)巴黎，在加利福尼亞州山景城設(shè)有美國(guó)子公司，公司由來自法國(guó)和美國(guó)的企業(yè)家、物理學(xué)家、工程師和外科醫(yī)生團(tuán)隊(duì)于 2020 年創(chuàng)立，旨在實(shí)現(xiàn)更快速、更安全、侵入性更小的手術(shù)。

公司的VR軟件能夠通過患者的CT或MR影像渲染出患者的3D“化身”，配合VR頭顯設(shè)備便于外科醫(yī)生更好的進(jìn)行術(shù)前規(guī)劃，也可以在手術(shù)過程中進(jìn)行輔助。

據(jù)介紹，目前該軟件已經(jīng)在美國(guó)經(jīng)過了100多名醫(yī)生，20多家醫(yī)院和大學(xué)的試用。用途包含案例研究、教學(xué)和患者溝通。

不僅如此，據(jù)其官網(wǎng)介紹該軟件平臺(tái)通過虛擬現(xiàn)實(shí)和貝葉斯法在醫(yī)學(xué)圖像中進(jìn)行超流暢的導(dǎo)航； 能與標(biāo)準(zhǔn)MRI和CT掃描圖像兼容，而無(wú)需數(shù)據(jù)預(yù)處理； 并且支持醫(yī)生事實(shí)進(jìn)行畫面調(diào)整。這一解決方案對(duì)于理解復(fù)雜的形態(tài)具有獨(dú)特的優(yōu)勢(shì)，比如望幫助避免乳房切除，縮短手術(shù)時(shí)間，并為骨科手術(shù)的硬件選擇提供信息。

放射科專家Venkatesh Krishnasamy博士表示，該平臺(tái)還在經(jīng)皮和血管內(nèi)介入方面提供“額外的能力和信心”。

Avatar Medical首席執(zhí)行官Xavier Wartelle表示：“過去3年，我們從外科醫(yī)生那里獲得了巨大的積極反饋，F(xiàn)DA的批準(zhǔn)是將我們VR平臺(tái)投入應(yīng)用的重要里程碑，我們預(yù)計(jì)在明年獲得CE認(rèn)證。”

史上最強(qiáng)頭顯誕生

Avatar Medical的軟件技術(shù)與VR硬件平臺(tái)無(wú)關(guān)，實(shí)際上此前的不少醫(yī)療VR軟件都選擇微軟作為頭顯硬件供應(yīng)商。

HoloLens作為微軟首個(gè)不受線纜限制的全息計(jì)算機(jī)設(shè)備，能讓用戶與數(shù)字內(nèi)容交互，并與周圍真實(shí)環(huán)境中的全息影像互動(dòng)。2019年推出了迭代版本HoloLens 2。 

不過如今，微軟HoloLens 2將面臨前所未有的強(qiáng)敵。2023年6月6日凌晨，在蘋果WWDC2023開發(fā)者大會(huì)上，“One more thing”蘋果首款頭顯Vision Pro正式發(fā)布。

這款產(chǎn)品通過內(nèi)外傳感器系統(tǒng)， 擺脫了手持控制器，而只靠手勢(shì)動(dòng)作、眼球的轉(zhuǎn)動(dòng)，以及語(yǔ)音指令等等就可操作控制。 蘋果CEO蒂姆·庫(kù)克稱，這是一款數(shù)字世界和現(xiàn)實(shí)世界相結(jié)合的革命性產(chǎn)品，將開啟空間計(jì)算新時(shí)代。

這款產(chǎn)品一經(jīng)發(fā)布就掀起了熱烈的討論， 尤其引人注意的是Vision Pro在內(nèi)部配置了4個(gè)眼動(dòng)追蹤攝像頭，通過將不可見光圖案投射到用戶的眼睛上，用來追蹤用戶的眼球運(yùn)動(dòng)，能夠在用戶操作之前預(yù)測(cè)出將要點(diǎn)擊的內(nèi)容 ，這一功能實(shí)際上就是一種非侵入式的初級(jí)腦機(jī)接口，能夠讓用戶實(shí)現(xiàn)“意念操控”。

據(jù)蘋果前研究員透露除了眼動(dòng)追蹤外， Vision Pro還能通過監(jiān)測(cè)腦部電活動(dòng)、心臟跳動(dòng)和節(jié)奏、肌肉活動(dòng)、大腦中的血液密度、血壓、皮膚電導(dǎo)等判斷用戶的心理活動(dòng) ，比如是否專注、知否走神、是否感到好奇，隨之調(diào)節(jié)虛擬環(huán)境的狀態(tài)，讓用戶更加沉浸。

而這些功能，無(wú)疑與醫(yī)療應(yīng)用非常契合。并且，這還只是蘋果發(fā)布的初代頭顯產(chǎn)品，盡管產(chǎn)品發(fā)布后已經(jīng)有不少聲音吐槽它只是隨身攜帶的游戲機(jī)沒有特別的必要性，而且價(jià)格昂貴，但顯然Vision Pro出色的硬件足以支持更復(fù)雜的任務(wù)，尤其是初步成型的腦機(jī)接口，給醫(yī)療領(lǐng)域打開了巨大的想象空間。

同時(shí)，Vision Pro的面世也意味著VR醫(yī)療軟件有了一個(gè)更加強(qiáng)大的運(yùn)行平臺(tái)，其擺脫手柄的設(shè)計(jì)，能讓醫(yī)生操作更加便利，顯然更加適宜手術(shù)室環(huán)境，這一先進(jìn)技術(shù)或許將成為虛擬現(xiàn)實(shí)醫(yī)療的又一推動(dòng)。

據(jù)最新市場(chǎng)研究報(bào)告估計(jì)，2020年，全球醫(yī)療AR/VR行業(yè)市場(chǎng)規(guī)模在19億美元以上，2021年至2026年，AR/VR醫(yī)療保健市場(chǎng)將以每年近35%的速度增長(zhǎng)，屆時(shí)市場(chǎng)規(guī)模將超過400億美元，遠(yuǎn)超2020年VR醫(yī)療市場(chǎng)規(guī)模。

隨著虛擬現(xiàn)實(shí)與人工智能、光場(chǎng)成像等技術(shù)的整合，越來越多企業(yè)也開始將VR/AR納入于高難度的手術(shù)執(zhí)行中。

Scopis

Scopis成立于 2012 年，總部位于德國(guó)柏林，是一家手術(shù)導(dǎo)航系統(tǒng)供應(yīng)商。Scopis全息導(dǎo)航平臺(tái)是一種通用的解決方案，該系統(tǒng)將HoloLens設(shè)備整合到Scopis圖像導(dǎo)航系統(tǒng)中，使用Scopis全息導(dǎo)航平臺(tái)時(shí)，外科醫(yī)生需要佩戴HoloLens眼鏡。HoloLens會(huì)在病人身上投射一個(gè)MR疊加層，該疊加層會(huì)完全覆蓋病人的患處，從而幫助醫(yī)生更好地進(jìn)行手術(shù)。

此外，Scopis還向疊加層添加了額外的3D追蹤技術(shù)，以進(jìn)一步提高手術(shù)的準(zhǔn)確性。同時(shí)還可以應(yīng)用于對(duì)精度和速度要求極高的許多其他領(lǐng)域。

Scopis作為醫(yī)療AR、醫(yī)療MR和混合導(dǎo)航領(lǐng)域的先鋒，其業(yè)務(wù)涵蓋了外科教育技術(shù)、耳鼻喉科（ENT）、顱頜面（CMF）、神經(jīng)系統(tǒng)和導(dǎo)航系統(tǒng)等領(lǐng)域。目前，全球已有50多個(gè)國(guó)家的外科醫(yī)生借助Scopis的產(chǎn)品進(jìn)行了超過一萬(wàn)次手術(shù)。

Xvision

Augmedics總部位于芝加哥，旨在通過利用先進(jìn)AR引導(dǎo)技術(shù)來增強(qiáng)來解決未滿足的臨床需求引導(dǎo)技術(shù)，并在手術(shù)流程中灌輸技術(shù)信心，從而改善醫(yī)療保健水平。其開創(chuàng)性的xvision是第一個(gè)用于外科手術(shù)的增強(qiáng)現(xiàn)實(shí)指導(dǎo)系統(tǒng)，這種外科手術(shù)增強(qiáng)現(xiàn)實(shí)指導(dǎo)系統(tǒng)不僅減少了X光輻射，還使外科醫(yī)生在做手術(shù)期間可以直接通過AR眼鏡實(shí)時(shí)透視肉眼捕捉不到的細(xì)節(jié)。

它使外科醫(yī)生可以通過皮膚和組織“看到”患者的解剖結(jié)構(gòu)，就好像他們具有“ X射線視力”一樣，并且可以在脊柱手術(shù)期間準(zhǔn)確地導(dǎo)航器械和植入物。在脊椎手術(shù)領(lǐng)域，Xvision用AR取代了傳統(tǒng)的X光透視方案，已拿下美國(guó)FDA審批。

Proximie

5G網(wǎng)絡(luò)和AR的結(jié)合則打破了遠(yuǎn)程手術(shù)數(shù)據(jù)傳輸?shù)钠款i。AR遠(yuǎn)程手術(shù)平臺(tái)Proximie與跨國(guó)移動(dòng)電話運(yùn)營(yíng)商Vodafone合作，不需價(jià)值百萬(wàn)的機(jī)器，只用四臺(tái)高清攝像頭安裝在手術(shù)室的四個(gè)方向，通過人工智能技術(shù)合成3D影響，傳輸給遠(yuǎn)程在線醫(yī)生的電腦顯視頻上。 

任何地方的外科醫(yī)生都可以進(jìn)入Proximie平臺(tái)的虛擬手術(shù)室，通過AR技術(shù)進(jìn)行遠(yuǎn)程指導(dǎo)和交互。

此外，去年10月美國(guó)FDA批準(zhǔn)了第一個(gè)為微軟HoloLens設(shè)備設(shè)計(jì)的AR醫(yī)療解決方案。

OpenSight

OpenSight是首個(gè)能夠用于手術(shù)術(shù)前計(jì)劃的AR應(yīng)用。該系統(tǒng)通過2D、3D和4D圖像技術(shù)讓醫(yī)生可以在手術(shù)開始前就能獲得可能會(huì)在術(shù)中遇到的問題的視覺指南。

這是款應(yīng)用在新興AR市場(chǎng)的領(lǐng)先設(shè)備，醫(yī)生能夠使用OpenSight的AR系統(tǒng)，通過覆蓋在患者體外的交互式可視化設(shè)備觀看其內(nèi)部解剖圖。FDA的批準(zhǔn)是VR和AR醫(yī)療保健技術(shù)日益普及的一個(gè)顯著發(fā)展，更多的技術(shù)突破即將到來。

VisAR

2022年6月15日，Novarad宣布其VisAR增強(qiáng)現(xiàn)實(shí)手術(shù)導(dǎo)航系統(tǒng)獲得FDA 510(k)批準(zhǔn)，該系統(tǒng)用于術(shù)中脊柱手術(shù)精確引導(dǎo)。

VisAR 使用 Novarad 圖形引擎將任何模態(tài)的 2D、3D 和 4D 數(shù)字圖像實(shí)時(shí)渲染為高度詳細(xì)的全息圖。使用帶有集成靶向系統(tǒng)的專利虛擬工具技術(shù)，全息圖直接準(zhǔn)確地疊加到患者的身體上。

據(jù)了解，VisAR 是一種端到端的解決方案，具有術(shù)前規(guī)劃、虛擬注釋、分割和雙向圖像連接。它具有集成的2D和3D沉浸式導(dǎo)航視圖，以及連續(xù)全息圖到患者注冊(cè)。VisAR技術(shù)利用圖像可見 CT 基準(zhǔn)標(biāo)記進(jìn)行自動(dòng)配準(zhǔn)，手術(shù)室設(shè)置時(shí)間不到2分鐘。在開放式和微創(chuàng)手術(shù)（MIS）手術(shù)中，椎弓根螺釘置入的手術(shù)精度低于2毫米。

——

在蘋果推出號(hào)稱“革命性產(chǎn)品”的這個(gè)夜晚，關(guān)于Vision Pro能否撬動(dòng)下一個(gè)時(shí)代的疑問也不絕于耳。而同一天，Avatar Medical產(chǎn)品獲批似乎也在告訴我們，未來已來，最尖端的數(shù)字科技將不可逆轉(zhuǎn)的改變醫(yī)學(xué)的面貌。虛擬現(xiàn)實(shí)醫(yī)療搭乘最先進(jìn)的硬件平臺(tái)，還會(huì)有更多想象與發(fā)展的空間，器械之家也會(huì)持續(xù)為大家?guī)磉@一領(lǐng)域的最新資訊。

END

 

更多精彩內(nèi)容

歡迎關(guān)注微信視頻號(hào)

 器械之家 

相關(guān)閱讀

戳一下，更有料！

5大主流十二指腸鏡 誰(shuí)能坐穩(wěn)第一把交椅？

101億，“手術(shù)動(dòng)力第一股”來了

4300萬(wàn)，百億械企被“瓜分肢解”

42億，高瓴競(jìng)購(gòu)，精密醫(yī)械巨頭將被拋售

2.6億，BD雙管齊下

邁瑞、聯(lián)影、先健...這一國(guó)家創(chuàng)新中心交出三周年答卷

創(chuàng)標(biāo)桿制造基地，邁瑞醫(yī)療有大動(dòng)作

中國(guó)首臺(tái)醫(yī)用重離子加速器，有新突破

國(guó)產(chǎn)首家，霆升科技ICE打破海外壟斷

國(guó)產(chǎn)內(nèi)鏡“獨(dú)角獸”全球總部及研發(fā)生產(chǎn)基地落地啟用

商 務(wù)合作：