外科醫生有了一雙“透視眼”,你會接受“掃描”嗎?
你會幻想自己有一雙透視眼嗎?
能夠看到緊閉的房門後是否有人,能看到一個電子產品中的各個部件,抑或是能看到人體內的組織器官?相信許多人都想要一雙透視眼,然而最早實現這一“夢想”的可能是醫生。
近日,美國食品與藥物管理局(FDA)宣佈,由Novarad公司開發的OpenSight AR系統成為FDA批准的首個用於微軟HoloLens的醫療AR解決方案,該系統通過2D、3D和4D影象技術,可以讓醫生在手術開始前獲得可能會在術中遇到的問題的視覺指南。
圖片來源見水印
設想一下,你去醫院看病,醫生只需上下“看”你一眼就能知道你的哪個器官出了問題,甚至於判斷你是否需要做手術……這樣的診斷靠譜嗎?
AR醫療前程遠大?
據高盛預估到2025年,VR和AR的市場規模將達到800億美元。其中醫療健康到2025年預期使用者約為340萬,市場規模將達到51億美元。可以看出,VR和AR醫療健康還是具有很大的潛力。
目前,AR醫療領域裡也出現了許多令人稱讚的產品,其中,實力最強的便是上文中提到的微軟HoloLen全息眼鏡,能夠察看人體結構;另外,飛利浦醫療保健部門與埃森哲合作開發了一款AR應用,用於監測患者生命體徵;印度東南部的一家醫院還藉助谷歌AR眼鏡完成了兩場手術;遊戲巨頭Illusion釋出的一套3D增強現實系統,能夠幫助醫生更好地實施整容手術。
但是,那些宣稱能夠或者已經做到輔助外科手術的AR產品,本質上更像一個AR“放大鏡”,使用方法主要是醫生通過佩戴眼鏡看到肉眼難以分辨的細微情況。而對於真正的高風險、高精度的手術,不論是HoloLens還是其它AR產品,可能都無法滿足產品化的臨床需求。
這是因為在手術中,產品至少需要保證1mm以內的識別跟蹤精度,但HoloLens或是蘋果的ARkit都還是基於光學SLAM演算法的方式進行影象識別追蹤,演算法的精度暫時還不能支援手術級別的要求。
這也是大部分AR產品的問題,現在,大部分AR應用畫質特效低劣,見慣了高清、超清平面畫面的普通患者尚且難以忍受這些“渣畫質”,更遑論對影像精度要求更高的醫療行業。
國內醫療相關的AR創業專案也面臨著此類技術問題,受限於演算法,許多產品都存在著清晰度不高,細節丟失嚴重等問題,除此之外,在手術導航方面,很多產品還缺乏精準的輔助空間定位系統,自然手勢互動的實現程度也是技術上要邁過的坎。
圖片來源見水印
另外,如果將AR與現實相結合,產品需要追蹤患者的動作姿勢,根據這些姿勢資訊來定位患者的身高體型和身體結構的位置,然後把事先渲染好的3D虛擬結構比例精確地顯示在患者的身體上,讓醫生可以實施的觀察患者身體內部的結構。
其中,這些虛擬影像都是根據患者的真實醫療影像資訊,比如CT/MIR超聲影像3D重建而成的,如此,先不論這些資料隱私是否能得到安全保障,身體被“透視”,患者是否能忍受醫生視線帶來的“侵入感”?
開始手術之前,AR還可以這樣落地
1.更多的普及患者/消費端
目前,科技公司的VR/AR醫療健康產品主要針對醫院和第三方實驗室,包括硬體、PC應用軟體等。顯然,AR醫療企業正在加大對B端使用者的開發,比如藥企、醫械廠商等。
但是,當專業度、精確度還不能達到手術標準時,貿然進軍B端,既難討好患者,又不招醫院待見,所以,在走向B端之前,C端無疑是最佳的“溫床”。
其中,女性醫美和健康方面的AR產品有著更大的潛力空間。有資料顯示,整形意向人群中,61.7%的人每年花費超過5000元用於整形,比上一年度增加11.7%,18.37%的人表示接受借錢整形,前提是“整的好”。
而這個“前提“完全可以交給AR來確認。比如在隆胸手術前,使用者戴好裝置,利用手機或平板鏡頭,捕捉自己軀體曲線的影像,最後再交由軟體計算,之後將不同罩杯、形狀的乳房模擬影像投射、疊加在使用者身上,以360度的3D影像呈現術後可能的物理辯護,使用者可以根據效果決定是否接受隆胸手術。不止於此,AR還可以用於五官整形、臉部拉提等手術前的效果預判。
致力於女性健康的AR APP也不少,Hologic開發的一款應用Hologic Augmented Reality app能夠與使用者直接互動,提供全面的影像系統和診斷檢測產品。
關於AR產品,未來的模式一定會越來越多樣化,提供的產品也會更豐富。比如,使用者可以藉助AR醫療應用提供的精確圖文一步步地完成自我診療全過程;急救人員通過AR頭戴顯示器等指揮現場人員作出針對性的搶救措施,防止因錯失搶救時間錯過最佳急救等等。
2.AR醫療教學,尤其是中醫藥教學
AR技術在醫療教育教學中的應用逐漸增多,目前比較成熟的AR醫療教學則是關於血管的照明,學生通過PC應用軟體能夠檢視隱藏的血管。本文開頭提及的OpenSight AR系統也開發了該軟體的教學版本,可以讓醫生對虛擬屍體進行虛擬解剖。如此,比起傳統的掛圖式解剖教學更加直觀立體,也更有利於學生的臨床實踐。
西醫方面,AR產品並不算少,但在中醫藥教育方面,由於中醫藥學科的的特殊性,在教學方式上的AR應用可謂是寥寥無幾。然而,正是因為中醫藥知識概念抽象、理論深奧,才更應該追求創新的教學方式。
例如,將AR技術與中藥材圖譜相結合,通過AR技術可將中藥植株和飲片立體地展現出來;亦或者在鍼灸教學過程中,AR技術為學生展現出一個虛擬的人體模型,可以演示穴位定位、進針手法等教學過程。
通過利用AR技術,藉助計算機將複雜資料進行視覺化,為學生提供一個虛擬環境與現實世界相結合的場景,讓學生沉浸在增強現實的場景中,變被動接受為主動學習。
現已有醫藥與AR手機應用相結合的教輔工具,如Aug-ment 3D和AR中藥材。後者能夠利用AR掃描圖片功能實現中藥材3D高精度呈現。前者不僅擁有豐富的3D模型庫,還提供了3D模型的介面,使用者可為模型庫新增3D模型圖或3D動畫模型。
結論:
隨著AR/VR、人工智慧等技術的發展,AR技術在遠端會診、病房護理、康復醫療等環節將會得到更好的應用,而且會更普遍地惠及消費端。相信在不久的將來,AR技術會不斷髮展和進步,為醫療領域帶來新的突破。
【完】
智慧相對論(微信id:aixdlun):深挖人工智慧這口井,評出鹹淡,講出黑白,道出vb深淺。重點關注領域:AI+醫療、機器人、智慧駕駛、AI+硬體、物聯網、AI+金融、AI+安全、AR/VR、開發者以及背後的晶片、演算法、人機互動等。