與微軟HoloLens相比,Magic Leap One的定位似乎更加廣泛,尤其是Magic Leap所提出的Magicverse新空間互聯(lián)網(wǎng)概念,涉及的遠不僅是娛樂、游戲場景,還涉及社交、健康醫(yī)療、能源和水力、交通等與我們生活息息相關(guān)的多個層面。
前不久,Magic Leap曾宣布正在與Brainlab合作,研發(fā)用于手術(shù)、診療、康復(fù)等場景的AR應(yīng)用,并且介紹了與SyncThink、XRHealth、Dan Marino Foundation和斯坦福兒童醫(yī)院正在合作進行的一些試點項目。
據(jù)了解,Dan Marino FoundaTIon曾利用Magic Leap One開發(fā)了一款名為VITA的虛擬面試練習(xí)系統(tǒng),旨在通過空間計算功能來幫助自閉癥等發(fā)育性殘疾患者,讓他們克服在面試等職業(yè)場景中可能會遇到的困難。它的特點是,在利用AR為患者模擬情景的同時,還通過AI識別注視點、語言模式和反應(yīng)時間,為患者生成實時反饋,提供對學(xué)習(xí)計劃的自適應(yīng)調(diào)整。
而斯坦福兒童醫(yī)院則將Magic Leap One用于醫(yī)療教學(xué),開發(fā)了一款名為CHARM的AR應(yīng)用。據(jù)悉,CHARM的特點是定制性強,可簡化教學(xué)模擬的配置,取代傳統(tǒng)教學(xué)所使用的的假體等昂貴醫(yī)療訓(xùn)練設(shè)施。同時,CHARM支持多人交互,老師與學(xué)生在同一環(huán)境下進行授課。
另外,Magic Leap還與SyncThink合作,將AR頭顯的眼球追蹤功能用于診療、腦健康分析和遠程診療。而與XRHealth的合作,則是將其ARHealth平臺與Magic Leap One AR頭顯結(jié)合,將AR空間計算用于康復(fù)、認知訓(xùn)練、心理評估和緩解疼痛等場景。
近期,外媒VatorNews采訪到Magic Leap醫(yī)療部門副總裁Jennifer Esposito,希望進一步了解上述AR醫(yī)療合作項目,以及Magic Leap計劃如何用技術(shù)改變醫(yī)療。據(jù)悉,Esposito在加入Magic Leap之前,曾在通用電氣醫(yī)療集團就職13年以上,還曾在Intel擔(dān)任4年多健康與生命科學(xué)部門總經(jīng)理。
Jennifer Esposito:在我加入Magic Leap之前,其實他們的團隊研究醫(yī)療業(yè)務(wù)已經(jīng)有一段時間了,尤其是CEO Rony Abovitz來自醫(yī)療設(shè)備背景,因此醫(yī)療也是這家公司的一部分。加入一個已經(jīng)從事AR醫(yī)療研究的團隊,是對于我的吸引力之一,我希望在這里幫助醫(yī)療應(yīng)用的進一步開發(fā),以及構(gòu)建Magic Leap平臺在醫(yī)療領(lǐng)域的生態(tài)。
Magic Leap團隊致力于將AR用于多種醫(yī)療場景,不管是在醫(yī)院、診所還是用戶家里。AR既可以幫助醫(yī)生,也可以幫助病人,出于對它的興趣我選擇加入Magic Leap。有趣的是,空間計算與AI、物聯(lián)網(wǎng)、5G等技術(shù)幾乎是同一時期興起,空間計算可以說是5G的一個重要應(yīng)用,此外如果將空間計算與AI、物聯(lián)網(wǎng)結(jié)合,將有可能實現(xiàn)我們已經(jīng)談?wù)摵芏嗄?,但一直沒能真正實現(xiàn)的應(yīng)用場景。
我們認為,空間計算將會成為一個全新的計算平臺,它將結(jié)合社交技術(shù)和全新的計算方式,將數(shù)字世界與物理世界緊密結(jié)合。拿醫(yī)院來講,我們?nèi)ツ昃驮寂c做醫(yī)療導(dǎo)航相關(guān)技術(shù)的BrainLab達成合作,一起開發(fā)一個叫做“軟件開發(fā)框架”的平臺。這個平臺可以讓生態(tài)內(nèi)的其他醫(yī)療設(shè)備公司開發(fā)Magic Leap應(yīng)用,還能利用我們將與BrainLab一同開發(fā)的新工具和功能。
這樣做的目的是,希望利用空間計算來優(yōu)化或加強傳統(tǒng)手術(shù)方式,因此我們將推出的第一款產(chǎn)品將著重于術(shù)前規(guī)劃。今年底,你會看到我們推出將平面術(shù)前規(guī)劃變成3D形式的工具,它將實現(xiàn)以前無法做到的一些協(xié)作方式。這個新的技術(shù)目前還在初期階段,它將著重于3D空間可視化,以及與不同類型數(shù)據(jù)的結(jié)合,讓復(fù)雜的數(shù)據(jù)也能更容易理解。將可視化數(shù)據(jù)放在3D空間中,你將能夠通過移動來對其進行瀏覽,還能直接進行刪除等操作。
未來,我們還將與BrainLab繼續(xù)合作開發(fā)其他應(yīng)用,一步一步實現(xiàn)未來真正的數(shù)字手術(shù)室。