與微軟HoloLens相比,Magic Leap One的定位似乎更加廣泛,尤其是Magic Leap所提出的Magicverse新空間互聯網概念,涉及的遠不僅是娛樂、游戲場景,還涉及社交、健康醫(yī)療、能源和水力、交通等與我們生活息息相關的多個層面。
前不久,Magic Leap曾宣布正在與Brainlab合作,研發(fā)用于手術、診療、康復等場景的AR應用,并且介紹了與SyncThink、XRHealth、Dan Marino Foundation和斯坦福兒童醫(yī)院正在合作進行的一些試點項目。
據了解,Dan Marino FoundaTIon曾利用Magic Leap One開發(fā)了一款名為VITA的虛擬面試練習系統(tǒng),旨在通過空間計算功能來幫助自閉癥等發(fā)育性殘疾患者,讓他們克服在面試等職業(yè)場景中可能會遇到的困難。它的特點是,在利用AR為患者模擬情景的同時,還通過AI識別注視點、語言模式和反應時間,為患者生成實時反饋,提供對學習計劃的自適應調整。
而斯坦福兒童醫(yī)院則將Magic Leap One用于醫(yī)療教學,開發(fā)了一款名為CHARM的AR應用。據悉,CHARM的特點是定制性強,可簡化教學模擬的配置,取代傳統(tǒng)教學所使用的的假體等昂貴醫(yī)療訓練設施。同時,CHARM支持多人交互,老師與學生在同一環(huán)境下進行授課。
另外,Magic Leap還與SyncThink合作,將AR頭顯的眼球追蹤功能用于診療、腦健康分析和遠程診療。而與XRHealth的合作,則是將其ARHealth平臺與Magic Leap One AR頭顯結合,將AR空間計算用于康復、認知訓練、心理評估和緩解疼痛等場景。
近期,外媒VatorNews采訪到Magic Leap醫(yī)療部門副總裁Jennifer Esposito,希望進一步了解上述AR醫(yī)療合作項目,以及Magic Leap計劃如何用技術改變醫(yī)療。據悉,Esposito在加入Magic Leap之前,曾在通用電氣醫(yī)療集團就職13年以上,還曾在Intel擔任4年多健康與生命科學部門總經理。
Jennifer Esposito:在我加入Magic Leap之前,其實他們的團隊研究醫(yī)療業(yè)務已經有一段時間了,尤其是CEO Rony Abovitz來自醫(yī)療設備背景,因此醫(yī)療也是這家公司的一部分。加入一個已經從事AR醫(yī)療研究的團隊,是對于我的吸引力之一,我希望在這里幫助醫(yī)療應用的進一步開發(fā),以及構建Magic Leap平臺在醫(yī)療領域的生態(tài)。
Magic Leap團隊致力于將AR用于多種醫(yī)療場景,不管是在醫(yī)院、診所還是用戶家里。AR既可以幫助醫(yī)生,也可以幫助病人,出于對它的興趣我選擇加入Magic Leap。有趣的是,空間計算與AI、物聯網、5G等技術幾乎是同一時期興起,空間計算可以說是5G的一個重要應用,此外如果將空間計算與AI、物聯網結合,將有可能實現我們已經談論很多年,但一直沒能真正實現的應用場景。
我們認為,空間計算將會成為一個全新的計算平臺,它將結合社交技術和全新的計算方式,將數字世界與物理世界緊密結合。拿醫(yī)院來講,我們去年就曾宣布與做醫(yī)療導航相關技術的BrainLab達成合作,一起開發(fā)一個叫做“軟件開發(fā)框架”的平臺。這個平臺可以讓生態(tài)內的其他醫(yī)療設備公司開發(fā)Magic Leap應用,還能利用我們將與BrainLab一同開發(fā)的新工具和功能。
這樣做的目的是,希望利用空間計算來優(yōu)化或加強傳統(tǒng)手術方式,因此我們將推出的第一款產品將著重于術前規(guī)劃。今年底,你會看到我們推出將平面術前規(guī)劃變成3D形式的工具,它將實現以前無法做到的一些協作方式。這個新的技術目前還在初期階段,它將著重于3D空間可視化,以及與不同類型數據的結合,讓復雜的數據也能更容易理解。將可視化數據放在3D空間中,你將能夠通過移動來對其進行瀏覽,還能直接進行刪除等操作。
未來,我們還將與BrainLab繼續(xù)合作開發(fā)其他應用,一步一步實現未來真正的數字手術室。